EP4740187A1 - Procede et dispositif de suivi de satellites dans une sequence d'images - Google Patents

Procede et dispositif de suivi de satellites dans une sequence d'images

Info

Publication number
EP4740187A1
EP4740187A1 EP24745480.4A EP24745480A EP4740187A1 EP 4740187 A1 EP4740187 A1 EP 4740187A1 EP 24745480 A EP24745480 A EP 24745480A EP 4740187 A1 EP4740187 A1 EP 4740187A1
Authority
EP
European Patent Office
Prior art keywords
measurements
trajectories
satellite
sequence
trj
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
EP24745480.4A
Other languages
German (de)
English (en)
Inventor
Gaëtan EYHERAMONO
Valentin LEMIESZ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ArianeGroup SAS
Original Assignee
ArianeGroup SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ArianeGroup SAS filed Critical ArianeGroup SAS
Publication of EP4740187A1 publication Critical patent/EP4740187A1/fr
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/62Extraction of image or video features relating to a temporal dimension, e.g. time-based feature extraction; Pattern tracking
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Image Analysis (AREA)
  • Position Fixing By Use Of Radio Waves (AREA)

Abstract

La présente invention concerne un procédé et dispositif (APP) de suivi de satellites dans une séquence d'images (IMG_SEQ). En particulier, le procédé comprend : - une étape d'obtention d'un ensemble de mesures (SIN) associées à des objets spatiaux observés dans les images de la séquence (IMG_SEQ), chaque mesure comprenant une position d'un objet dans une image et un indice temporel de l'image; - une étape de détection de trajectoires de satellites (TRJ) dans la séquence d'images (IMG_SEQ), par un détecteur (DET) comprenant au moins un réseau de neurones et utilisant tout ou partie de l'ensemble de mesures obtenu (SIN); et - une étape de classification des trajectoires de satellites détectées (TRJ), par un classifieur (CLA) comprenant au moins un autre réseau de neurones.

Description

Description
Titre : Procédé et dispositif de suivi de satellites dans une séquence d'images
Domaine technique
[0001] La présente invention se rapporte aux domaines de l'analyse d'images et du suivi d'objets. En particulier, la présente invention concerne un procédé et un dispositif de suivi de satellites dans une séquence d'images, ainsi qu'un système de surveillance, un programme d'ordinateur et un support d'informations associés. La présente invention trouve une application particulièrement avantageuse, bien que nullement limitative, pour la mise en oeuvre de systèmes de surveillance de l'espace.
Technique antérieure
[0002] L'invention s'inscrit dans le contexte particulier des systèmes de surveillance de l'espace extraatmosphérique. De tels systèmes ont pour objectif de localiser les satellites en orbite et de fournir leurs trajectoires respectives. À cet effet, ces systèmes exploitent des capteurs optiques pour capturer des images des satellites en orbite autour de la Terre. Cependant, ces images comprennent à la fois des satellites, des étoiles, et du bruit (e.g. des pixels chauds).
[0003] Aussi, nous nous intéressons ci-après aux systèmes de surveillance capable d'extraire les trajectoires des différents satellites observés dans une séquence d'images. Autrement dit, ces systèmes visent à fournir en sortie un ensemble de mesures associées à un même satellite pour décrire sa trajectoire au cours du temps, c'est-à-dire un ensemble de coordonnées tridimensionnelles associées à ce satellite (positions spatiales x et y, et indice temporel).
[0004] Dans l'état actuel de la technique, il existe des solutions analytiques pour suivre des satellites au sein d'une séquence d'images. Ces solutions analytiques exploitent les distances entre les mesures associées aux objets spatiaux observés pour extraire les trajectoires des satellites et détecter les différents types de trajectoires (e.g. géostationnaire, défilantes).
[0005] Toutefois, les solutions existantes de suivi de satellites présentent un certain nombre d'inconvénients et notamment les suivants. D'une part, ces solutions analytiques impliquent une complexité de mise en oeuvre élevée, qui nécessite la configuration manuelle d'une multitude de paramètres et une utilisation importante de ressources informatiques (i.e. des temps d'exécution importants). D'autre part, la fiabilité de ces solutions, en termes de trajectoires correctement détectées, n'est pas pleinement satisfaisante.
[0006] Il existe par conséquent un besoin pour une solution permettant de suivre des satellites dans une séquence d'images de manière fiable et avec une complexité de mise en oeuvre minime. Exposé de l'invention
[0007] La présente invention a pour objectif de remédier à tout ou partie des inconvénients de l'art antérieur, notamment ceux exposés précédemment.
[0008] Selon un aspect de l'invention, il est proposé un procédé de suivi de satellites dans une séquence d'images, le procédé comprenant : une étape d'obtention d'un ensemble de mesures associées à des objets spatiaux observés dans les images de la séquence, chaque mesure comprenant une position d'un objet dans une image et un indice temporel de l'image ; une étape de détection de trajectoires de satellites dans la séquence d'images, par un détecteur comprenant au moins un réseau de neurones et utilisant tout ou partie de l'ensemble de mesures obtenu ; et une étape de classification des trajectoires de satellites détectées, par un classifieur comprenant au moins un autre réseau de neurones.
[0009] La présente invention permet d'extraire les trajectoires respectives des satellites observés dans la séquence d'images. En fait, la présente invention permet d'associer les mesures appartenant à un même satellite pour décrire sa trajectoire dans la séquence d'images. Il est important de noter que la présente invention permet non seulement de suivre des satellites en orbite géostationnaire, mais également des satellites en orbite terrestre moyenne ou basse.
[0010] De plus, la présente invention permet de classer les trajectoires détectées. Notamment, la classe attribuée à chaque trajectoire de satellite peut indiquer le type d'orbite du satellite. Par exemple, la liste des classes attribuables peut inclure : trajectoire géostationnaire fixe ; trajectoire géostationnaire dérivante ; trajectoire de type défilante (i.e. satellite en orbite terrestre moyenne ou basse se déplaçant à grande vitesse) ; et trajectoire de type trainée (i.e. satellite en orbite terrestre basse se déplaçant à très grande vitesse).
[0011] En comparaison aux solutions analytiques existantes, la présente invention permet d'améliorer la fiabilité de suivi des satellites observés au sein d'une séquence d'images. Elle présente en outre une complexité de mise en oeuvre réduite (i.e. des temps d'exécution réduits, moins de configuration). De manière avantageuse, la présente invention ne nécessite pas de connaissance a priori des orbites pour suivre des satellites dans une séquence d'images.
[0012] En effet, l'utilisation d'un ou plusieurs réseaux de neurones pour mettre en oeuvre le détecteur permet d'obtenir une détection fiable des trajectoires, en termes de trajectoires correctement détectées. Le ou les réseaux de neurones sont entrainés de manière automatique à partir de données d'entrainement (i.e. des séquences d'images de référence) pour optimiser la fiabilité de détection des trajectoires des satellites. Cela permet notamment d'obtenir des performances nettement améliorées en comparaison aux solutions analytiques. De plus, l'utilisation d'un ou plusieurs réseaux de neurones permet de réduire significativement les ressources informatiques nécessaires, notamment en termes de temps d'exécution.
[0013] Il en est de même pour le classifieur comprenant un ou plusieurs réseaux de neurones, ce qui permet d'améliorer la fiabilité de classification des trajectoires (i.e. trajectoires correctement identifiées). Cela permet également de réduire les ressources informatiques nécessaires (i.e. temps d'exécution). L'utilisation conjointe d'un ou plusieurs réseaux de neurones pour détecter les trajectoires de satellites, et d'un ou plusieurs autres réseaux de neurones pour classer ces trajectoires permet d'obtenir un suivi fiable des satellites observés dans la séquence d'images.
[0014] Ainsi, la présente invention permet de suivre des satellites dans une séquence d'images de manière fiable et avec une complexité de mise en oeuvre minime.
[0015] Selon un mode de mise en oeuyre, le détecteur comprend au moins un réseau de neurones convolutif, et détermine des cadres englobant (entourant) chacun une trajectoire de satellites dans les images de la séquence. De plus, selon ce mode de mise en oeuvre, le classifieur comprend au moins un réseau de neurones de classification (i.e. de segmentation), notamment au moins un réseau de neurones de type PointNet. Et, pour chaque cadre englobant une trajectoire de satellite, le classifieur détermine (i.e. associe) les mesures situées dans le cadre appartenant à cette trajectoire, et attribue une classe à cette trajectoire.
[0016] Par « réseau de neurones convolutif », nous faisons référence ici à un réseau de neurones comprenant une ou plusieurs couches de convolution. Et, par « réseau de neurones de type PointNet », nous faisons référence à un réseau de neurones dédié au traitement de nuages de points, et notamment à des applications de classification et de segmentation. Les réseaux de type PointNet et leur mise en oeuvre sont par exemple décrits dans le document suivant : Qi et al., « PointNet : Deep Learning on Point Sets for 3D Classification and Segmentation », 2017.
[0017] Ce mode de mise en oeuvre propose d'utiliser un ou plusieurs réseaux de neurones convolutifs pour détecter les trajectoires de satellites, et d'utiliser un ou plusieurs réseaux de neurones de type PointNet pour classer (segmenter) ces trajectoires.
[0018] Le ou les réseaux de neurones convolutifs permettent au détecteur d'exploiter les caractéristiques spatio-temporelles de la séquence d'images pour détecter les trajectoires des satellites. Plus précisément, il exploite les caractéristiques spatio-temporelles de la séquence d'images pour déterminer des cadres englobant (i.e. des « bounding boxes » en anglais) les trajectoires de satellites. Le ou les réseaux de neurones convolutifs permettent ainsi d'obtenir une détection fiable des trajectoires des différents satellites observés dans la séquence d'images.
[0019] De plus, l'utilisation d'un ou plusieurs réseaux de neurones de type PointNet pour mettre en oeuvre le classifieur est particulièrement avantageuse. En effet, le réseau de type PointNet est optimisé pour classer et segmenter des nuages de points. Ici, le réseau de type PointNet traite séparément chacun des cadres englobant les trajectoires de satellites. Pour chaque cadre englobant une trajectoire, il prend en entrée l'ensemble des mesures situées à l'intérieur du cadre englobant dans la séquence d'images. Ainsi, ces réseaux de type PointNet permettent de séparer, de manière fiable, les mesures appartenant à la trajectoire de celles n'appartenant pas à la trajectoire, et d'attribuer une classe à cette trajectoire.
[0020] Aussi, ce mode de mise en oeuvre permet de manière fiable d'extraire les trajectoires respectives des différents satellites observés dans la séquence d'images et de classer celles-ci.
[0021] Selon un mode de mise en oeuyre, le détecteur comprend au moins un réseau de neurones de type Transformer, et associe les mesures appartenant à une même trajectoire de satellite dans les images de la séquence. Par ailleurs, selon ce mode de réalisation, le classifieur comprend au moins un réseau de classification et attribue une classe à chacune des trajectoires de satellites.
[0022] Nous faisons ici référence par « réseau de neurones de type Transformer » à un réseau de neurones exploitant un mécanisme d'attention. Les réseaux de neurones de type Transformer et leur mise en oeuvre sont par exemple décrits dans le document suivant : A. Vaswani et al., « Attention Is All You Need », 2017.
[0023] Il convient de souligner que les réseaux de type Transformer sont optimisés pour traiter des données séquentielles et permettent d'exploiter les caractéristiques temporelles des données d'entrée. Dans le contexte de l'invention, l'utilisation d'un réseau de type Transformer permet au détecteur d'exploiter les caractéristiques temporelles de l'ensemble de mesures pour extraire les trajectoires respectives des satellites observés dans la séquence d'images.
[0024] Ce mode de mise en oeuvre est particulièrement avantageux en ce qu'il permet d'améliorer la fiabilité du suivi des satellites observés dans une séquence d'images. En outre, l'utilisation d'un réseau de type Transformer permet de réduire les ressources informatiques (i.e. le temps d'exécution) nécessaires à la mise en oeuvre de la solution proposée.
[0025] Selon un mode de mise en oeuyre, le détecteur détermine des vecteurs latents représentatifs de dites mesures en utilisant ledit au moins un réseau de neurones de type Transformer ; et, le détecteur associe des mesures à une même trajectoire de satellite en fonction de distances entre les vecteurs latents.
[0026] Ce mode de mise en oeuvre propose d'utiliser le réseau de type Transformer réseau pour représenter dans un espace latent les mesures associées aux objets spatiaux observés dans la séquence d'images. Pour chacune des mesures fournies en entrée, le réseau de neurones de type Transformer détermine un vecteur latent.
[0027] Notons que le réseau de neurones de type Transformer permet d'apprendre, sur la base de données d'entrainement, un espace latent dans lequel les mesures appartenant à une même trajectoire sont proches. Ce réseau permet ainsi de représenter les mesures dans un espace latent de sorte à minimiser la distance entre les vecteurs latents de mesures appartenant à une même trajectoire, et à maximiser les distances entre les vecteurs latents de mesures appartenant à des trajectoires différentes.
[0028] Ce mode de mise en oeuvre permet donc, en utilisant les distances entre les vecteurs latents, d'associer (i.e. de regrouper) de manière fiable les mesures appartenant à une même trajectoire.
[0029] Selon un mode de mise en oeuyre, le détecteur comprend une pluralité de réseaux de neurones respectivement dédiés à la détection de trajectoires de satellites de vitesses différentes ; et /ou le classifieur comprend une pluralité de réseau de neurones respectivement dédiés à la classification de trajectoires de satellites de vitesses différentes.
[0030] Ce mode de mise en oeuvre permet adapter la détection et/ou la classification des trajectoires en fonction de différents types de trajectoires (e.g. orbites géostationnaire fixes ou dérivantes, orbites terrestres moyennes et basses). Cela permet avantageusement d'améliorer la fiabilité de la solution proposée.
[0031] Selon un mode de mise en oeuyre, le procédé comprend une étape de filtrage de l'ensemble de mesures pour éliminer les mesures associées à (i.e. provenant) des étoiles, et dans lequel le détecteur utilise uniquement l'ensemble de mesures filtré pour réaliser l'étape de détection de trajectoires de satellites dans la séquence d'images.
[0032] Ce mode de mise en oeuvre permet d'éliminer les étoiles présentes dans la séquence d'images. Typiquement, les étoiles sont en nombre important par rapport aux satellites dans une séquence d'images, ce qui peut parasiter la détection des trajectoires de satellites. Aussi, ce mode de mise en oeuvre contribue à améliorer la fiabilité de la solution proposée de suivi de satellites dans une séquence d'images. En outre, et de manière avantageuse, la solution proposée pour éliminer les mesures correspondant à des étoiles ne nécessite pas de connaissance a priori de leurs positions.
[0033] Selon un mode de mise en oeuyre, l'étape de filtrage de l'ensemble de mesures pour éliminer les mesures associées à des étoiles comprend : une détermination d'informations de déplacement des étoiles à partir de mesures dont la luminosité est supérieure à un seuil dans les images de la séquence ; et une étape d'élimination (i.e. de suppression) des mesures considérées comme associées à des étoiles à partir des informations de déplacement déterminées.
[0034] Ce mode de mise en oeuvre est avantageux en ce qu'il permet d'éliminer de manière fiable les étoiles dans les images de la séquence.
[0035] En fait, les inventeurs ont observé que la majorité des mesures les plus lumineuses dans une séquence d'images sont des étoiles. Aussi, il est proposé ici d'exploiter les mesures les plus lumineuses pour déterminer les informations de déplacement des étoiles (e.g. vitesse de déplacement des étoiles par image, ou angle de rotation des étoiles par image). Ensuite, ces informations de déplacement sont utilisées pour déterminer quelles mesures correspondent à des étoiles, et éliminer celles-ci.
[0036] Selon un mode de mise en oeuyre, le procédé comprend : une ou plusieurs étapes de fusion (i.e. de combinaison) des trajectoires de satellites pour regrouper les mesures associées à plusieurs trajectoires de satellite détectées et appartenant à un même un satellite ; et/ou une étape de filtrage des trajectoires de satellites pour qu'une dite trajectoire de satellite comprenne uniquement une mesure par image de la séquence.
[0037] Ce mode de mise en oeuvre propose de réaliser différentes étapes de post-traitement sur les trajectoires de satellites détectées par la solution proposée. Il contribue ainsi à améliorer la fiabilité de la solution proposée de suivi de satellites.
[0038] D'une part, il est proposé de fusionner (i.e. combiner) les trajectoires appartenant à un même satellite. Autrement dit, si des mesures appartenant à un même satellite ont été associées à une pluralité de trajectoires, alors ces mesures sont regroupées au sein d'une même trajectoire.
[0039] Par ailleurs, il est également proposé de filtrer les différentes trajectoires de satellites détectées de sorte que chaque trajectoire ne comprenne qu'une mesure par image de la séquence.
[0040] Selon un autre aspect de l'invention, il est proposé un dispositif de suivi de satellites dans une séquence d'images, le dispositif comprenant : un module d'obtention configuré pour obtenir un ensemble de mesures associées à des objets spatiaux observés dans les images de la séquence, chaque mesure comprenant une position d'un objet dans une image et un indice temporel de l'image ; un détecteur configuré pour détecter des trajectoires de satellites dans la séquence d'images, le détecteur comprenant au moins un réseau de neurones et utilisant tout ou partie de l'ensemble de mesures obtenu ; et un classifieur configuré pour classer les trajectoires de satellites détectées, le classifieur comprenant au moins un autre réseau de neurones.
[0041] Le dispositif de suivi de satellites peut être configuré pour réaliser n'importe lequel des modes de mise en oeuvre d'un procédé conforme à l'invention. En particulier, pour chaque étape d'un procédé conforme à l'invention, le dispositif peut comprendre un module configuré pour mettre en oeuvre cette étape.
[0042] Le terme module peut correspondre aussi bien à un composant logiciel qu'à un composant matériel ou un ensemble de composants matériels et logiciels. Un composant logiciel correspond à un ou plusieurs programmes ou sous-programmes d'ordinateur, ou de manière plus générale à tout élément d'un programme apte à mettre en oeuvre une fonction ou un ensemble de fonctions telles que décrites pour les modules concernés. De la même manière, un composant matériel correspond à tout élément d'un ensemble matériel apte à mettre en oeuvre une fonction ou un ensemble de fonctions pour le module concerné.
[0043] Selon un aspect de l'invention, il est proposé un système de surveillance comprenant : un dispositif de suivi de satellites conforme à l'invention ; et un dispositif d'acquisition d'une séquence d'images.
[0044] Selon un aspect de l'invention, il est proposé un programme d'ordinateur comprenant des instructions pour mettre en oeuvre les étapes d'un procédé conforme à l'invention, lorsque le programme d'ordinateur est exécuté par au moins un processeur ou un ordinateur.
[0045] Le programme d'ordinateur peut être formé d'une ou plusieurs sous-parties stockées dans une même mémoire ou dans des mémoires distinctes. Le programme peut utiliser n'importe quel langage de programmation, et être sous la forme de code source, de code objet, ou de code intermédiaire entre code source et code objet, tel que dans une forme partiellement compilée, ou dans n'importe quelle autre forme souhaitable.
[0046] Selon un aspect de l'invention, il est proposé un support d'informations lisible par ordinateur comprenant un programme d'ordinateur conforme à l'invention.
[0047] Le support d'informations peut être n'importe quelle entité ou dispositif capable de stocker le programme. Par exemple, le support peut comporter un moyen de stockage, tel qu'une mémoire non-volatile ou ROM, par exemple un CD-ROM ou une ROM de circuit microélectronique, ou encore un moyen d'enregistrement magnétique, par exemple une disquette ou un disque dur. D'autre part, le support de stockage peut être un support transmissible tel qu'un signal électrique ou optique, qui peut être acheminé via un câble électrique ou optique, par radio ou par un réseau de télécommunication ou par un réseau informatique ou par d'autres moyens. Le programme selon l'invention peut être en particulier téléchargé sur un réseau informatique. Alternativement, le support d'informations peut être un circuit intégré dans lequel le programme est incorporé, le circuit étant adapté pour exécuter ou pour être utilisé dans l'exécution du procédé en question.
[0048] Le dispositif de suivi de satellites, le système de surveillance, le programme d'ordinateur et le support d'informations proposés disposent des avantages décrits ci-dessus en lien avec le procédé proposé de suivi de satellites.
Brève description des dessins
[0049] D'autres caractéristiques et avantages de la présente invention ressortiront de la description fournie ci-après, illustrant des modes de réalisation de l'invention donnés à titre d'exemple et dépourvus de tout caractère limitatif, en référence aux dessins ci-joints :
[0050] La figure 1 représente un exemple d'architecture d'un système de surveillance selon un mode de réalisation de l'invention ; [0051] La figure 2 représente un exemple d'architecture d'un dispositif de suivi de satellites dans une séquence d'images selon un mode de réalisation de l'invention ;
[0052] La figure 3 représente des étapes d'un procédé de suivi de satellites dans une séquence d'images selon un mode de réalisation de l'invention ;
[0053] La figure 4 représente des étapes d'un procédé selon un mode de réalisation de l'invention pour éliminer des étoiles dans une séquence d'images ;
[0054] La figure 5 représente un exemple d'architecture d'un dispositif de suivi de satellites dans une séquence d'images selon un mode de réalisation de l'invention ;
[0055] La figure 6 représente des exemples d'images traitées par un dispositif de suivi de satellites selon un mode de réalisation de l'invention ;
[0056] La figure 7 représente un exemple d'architecture d'un dispositif de suivi de satellites dans une séquence d'images selon un mode de réalisation de l'invention ; et
[0057] La figure 8 représente des étapes d'un procédé selon un mode de réalisation de l'invention pour effectuer des opérations de post-traitement de trajectoires de satellites.
Description des modes de réalisation
[0058] La présente invention s'applique, en particulier, aux systèmes de surveillance de l'espace. La description suivante de l'invention se référera à ce contexte particulier d'application, qui n'est donné qu'à titre d'exemple illustratif et ne doit pas limiter l'invention.
[0059] La figure 1 représente un exemple d'architecture d'un système de surveillance selon un mode de réalisation de l'invention. Cette figure est décrite ci-après pour introduire la présente invention et exemplifier un contexte d'application.
[0060] Le système de surveillance SYS comprend au moins un dispositif d'acquisition SENS et un dispositif de suivi de satellites APP. Le système SYS peut également comprendre un dispositif OUT de restitution et/ou de stockage.
[0061] Nous décrivons ci-après un système SYS comprenant un unique dispositif d'acquisition SENS. Toutefois, il pourrait également être envisagé des modes de réalisation dans lesquels le système SYS comprend une pluralité de dispositifs d'acquisition SENS, situés à différents endroits sur Terre et/ou de différents types.
[0062] Le dispositif SENS est configuré pour acquérir (i.e. capturer) une séquence d'images IMG_SEQ. Ce dispositif SENS comprend un ou plusieurs capteurs optiques, tels qu'une caméra, ou un capteur infra-rouge. Comme illustré sur la figure 1, le dispositif SENS est configuré pour fournir la séquence d'images IMG_SEQ au dispositif APP. [0063] La séquence d'images IMG_SEQ comprend une pluralité d'images consécutives couvrant une portion du ciel. Chaque image de la séquence IMG_SEQ est associée à un instant d'acquisition. Typiquement, au sein des images de la séquence IMG_SEQ, se trouvent à la fois des satellites en orbite autour de la Terre, des étoiles (en nombre important par rapport aux satellites), et des mesures issues de bruit (e.g. des pixels chauds).
[0064] Notons également que les satellites observés dans la séquence d'images IMG_SEQ peuvent comprendre des satellites géostationnaires fixes, des satellites géostationnaires dérivants, et des satellites défilants. En d'autres termes, les satellites observés peuvent présenter des orbites géostationnaires GEO (acronyme de « Geosynchronous Earth Orbit » en anglais), des orbites terrestres moyennes MEO (acronyme de « Medium Earth Orbit » en anglais), ou des orbites terrestres basses LEO (acronyme de « Low Earth Orbit » en anglais).
[0065] Le dispositif APP est configuré pour suivre les satellites observés dans la séquence d'images IMG_SEQ. Autrement dit, il est configuré pour déterminer les trajectoires TRJ respectives des différents satellites présents dans la séquence d'images IMG_SEQ.
[0066] Dans le contexte de l'invention, une « trajectoire de satellite » est définie par un ensemble de mesures associées au satellite, chacune de ces mesures comprenant une position du satellite (e.g. coordonnées x et y du satellite dans l'image), et un indice temporel (e.g. indice de l'image dans la séquence, ou instant d'acquisition de l'image). Par exemple, une trajectoire de satellite Tm peut être définie de la manière suivante : Tm={(xn, yn, in) I n e Nm)}, avec Nm les indices des mesures associées à cette trajectoire.
[0067] Selon le mode de réalisation illustré par la figure 1, le dispositif APP est configuré pour fournir les trajectoires de satellites TRJ au dispositif OUT. Par exemple, le dispositif OUT peut être un dispositif de restitution comprenant un écran permettant d'afficher les trajectoires des satellites TRJ. En variante, le dispositif OUT pourrait être un dispositif de stockage utilisé pour enregistrer les trajectoires de satellites TRJ.
[0068] Le dispositif APP comprend, selon le mode de réalisation illustré par la figure 1 : au moins une unité de traitement ou processeur PROC ; et au moins une mémoire MEM.
[0069] Plus particulièrement, le dispositif APP dispose, selon un mode de réalisation, de l'architecture matérielle d'un ordinateur. La mémoire MEM constitue un support d'informations conforme à l'invention, c'est-à-dire lisible par le processeur PROC et sur lequel est enregistré un programme d'ordinateur PROG conforme à l'invention. Le programme PROG comporte des instructions pour réaliser des étapes d'un procédé de suivi de satellites conforme à l'invention, lorsque le programme PROG est exécuté par le processeur PROC. Le programme PROG définit notamment les modules fonctionnels du dispositif APP représentés sur la figure 2, qui s'appuient sur ou commandent les éléments matériels de ce dernier. [0070] Tel qu'illustré par la figure 1, le dispositif APP dispose d'un module de communication COM configuré pour communiquer avec le dispositif d'acquisition SENS et/ou le dispositif OUT. Aucune limitation n'est attachée à la nature des interfaces de communication entre ces dispositifs, qui peuvent être filaires ou non filaires, et peuvent mettre en oeuvre tout protocole connu de l'homme du métier.
[0071] L'architecture du dispositif de suivi de satellites APP étant introduite, nous décrivons ci-après son fonctionnement en référence aux figures suivantes.
[0072] La figure 2 et la figure 3 représentent respectivement un exemple d'architecture d'un dispositif de suivi de satellites et des étapes d'un procédé de suivi de satellites selon un mode de réalisation de l'invention. Ces figures présentent le fonctionnement du dispositif APP introduit en référence à la figure 1.
[0073] Les différents modules fonctionnels du dispositif APP sont illustrés sur la figure 2. Nous décrivons les fonctions de ces modules en relation avec les étapes du procédé de la figure 3.
[0074] Tel qu'illustré par la figure 3, le procédé proposé comprend tout ou partie des étapes S100 à S600 décrites ci-après, celles-ci étant mises en oeuvre par le dispositif APP.
[0075] Le procédé proposé peut comprendre une pluralité d'itérations de chacune de ses étapes. Les étapes du procédé peuvent être réitérées à une fréquence donnée, par exemple toutes les nuits, ou toutes les semaines.
[0076] À l'étape S100, le module d'obtention OBT du dispositif APP obtient la séquence d'images IMG_SEQ. À partir de celle-ci, il obtient un ensemble de mesures SiN associées aux objets spatiaux observés dans les images de la séquence IMG_SEQ.
[0077] Le dispositif APP reçoit la séquence d'images IMG_SEQ en provenance du dispositif d'acquisition SENS, par l'intermédiaire de son module de communication COM. En variante, le dispositif de surveillance APP pourrait également lire la séquence d'images IMG_SEQ sur une mémoire partagée avec le dispositif d'acquisition SENS.
[0078] Ensuite, le dispositif APP traite la séquence d'images IMG_SEQ pour obtenir l'ensemble de mesures SiN associées aux différents objets spatiaux observés dans la séquence IMG_SEQ. Pour ce faire, le dispositif APP peut utiliser n'importe quelle technique connue de détection de points dans des images. Par exemple, il peut utiliser un filtre passe-haut, ou un réseau de neurones.
[0079] Pour chaque objet spatial observé dans une image de la séquence IMG_SEQ, le dispositif APP obtient une mesure (i.e. un point) en trois dimensions. Chaque mesure comprend des coordonnées x et y décrivant la position de l'objet dans l'image, et un indice temporel (e.g. l'indice de l'image dans la séquence, l'instant d'acquisition de l'image). Ainsi, l'ensemble de mesures SiN={(xn, yn, in) I n e NIN} avec NIN les indices des mesures obtenues. [0080] À l'étape S200, le filtre FLT du dispositif APP filtre l'ensemble de mesures SiN pour éliminer les mesures associées à des étoiles. Le dispositif APP obtient ainsi un ensemble de mesures filtré SFLT={(xn, yn, in) I n e NFLT} avec NF T les indices des mesures conservées. Ainsi, l'ensemble de mesures filtré SFLT ne comprend pas les mesures considérées comme correspondant d'étoiles.
[0081] Nous décrivons plus en détail la mise en oeuvre de l'étape S200 en référence à la figure 4.
[0082] À l'étape S300, le détecteur DET du dispositif APP détecte, à partir de l'ensemble de mesures filtré SFLT, les trajectoires de satellites TRJ dans la séquence d'images IMG_SEQ. Le détecteur DET comprend (i.e. met en oeuvre) au moins un réseau de neurones artificiels.
[0083] À l'étape S400, le classifieur CLA du dispositif APP classe les trajectoires de satellites détectées TRJ. Le classifieur CLA comprend (i.e. met en oeuvre) au moins un réseau de neurones artificiels.
[0084] Suites aux étapes S300 et S400, le dispositif APP obtient des trajectoires de satellites TRJ. Comme évoqué précédemment, la trajectoire d'un satellite Tm est définie par un ensemble de mesures Tm={(xn, yn, in) I n e Nm} avec Nm les indices des mesures de la trajectoire. De plus, le dispositif APP attribue une classe Cm à cette trajectoire Tm.
[0085] Les classes attribuées aux trajectoires par le dispositif APP indiquent les types de trajectoires (i.e. d'orbites) des satellites. Par exemple, la liste des classes attribuables peut inclure : trajectoire géostationnaire fixe ; trajectoire géostationnaire dérivante ; trajectoire de type défilante (i.e. satellite en orbite terrestre moyenne ou basse se déplaçant à grande vitesse) ; et trajectoire de type trainée (i.e. satellite en orbite terrestre basse se déplaçant à très grande vitesse) ; et bruit.
[0086] La mise en oeuvre des étapes S300 et S400 est décrite plus en détail en référence aux figures 5 et 7. Plus précisément, la figure 5 illustre un premier mode de réalisation des étapes S300 et S400, tandis que la figure 7 illustre un deuxième mode de réalisation de ces étapes.
[0087] À l'étape S500, le module de traitement PP du dispositif APP effectue des opérations (analytiques) dites de post-traitement des trajectoires de satellites détectées TRJ.
[0088] Cette étape permet notamment d'améliorer les résultats de la solution proposée de suivi de satellites dans une séquence d'images IMG_SEQ. La mise en oeuvre de l'étape S500 est détaillée ci-après en référence à la figure 8.
[0089] À l'étape S600, et selon un mode de réalisation, le dispositif APP fournit les trajectoires de satellites TRJ au dispositif OUT, par l'intermédiaire de son module de communication COM.
[0090] Comme indiqué précédemment, chacune des trajectoires de satellite TRJ fournies par le dispositif APP comprend : un ensemble de mesures Tm décrivant les positions d'un satellite dans les images de la séquence IMG_SEQ ; et une classe Cm indiquant le type de trajectoire du satellite.
[0091] Le dispositif OUT peut par exemple afficher les trajectoires de satellites TRJ sur un écran. En variante, ce dispositif OUT peut être utilisé pour stocker les trajectoires de satellites TRJ. Ces trajectoires TRJ peuvent être analysées ultérieurement par un dispositif distinct afin de cataloguer les orbites des satellites observés.
[0092] Nous avons présenté ici le fonctionnement général du dispositif APP proposé pour suivre des satellites dans une séquence d'images IMG_SEQ. Aussi, nous détaillons ci-après la mise en oeuvre des étapes S200 à S500 en référence aux figures suivantes.
[0093] La figure 4 représente des étapes d'un procédé selon un mode de réalisation de l'invention pour éliminer des étoiles dans une séquence d'images. Cette figure détaille la mise en oeuvre de l'étape S200 de filtrage pour éliminer les mesures associées à des étoiles.
[0094] Tel qu'illustré par la figure 4, l'étape S200 comprend tout ou partie des étapes S210 à S240 décrites ci-après et mises en oeuvre par le filtre FLT du dispositif APP.
[0095] À l'étape S210, le dispositif APP sélectionne, parmi l'ensemble de mesures SiN, les mesures dont la luminosité est supérieure à un seuil dans les images de la séquence IMG_SEQ. Ainsi, le dispositif APP sélectionne les points les plus lumineux dans les images de la séquence IMG_SEQ.
[0096] Les inventeurs ont constaté que la majorité des mesures les plus lumineuses dans une séquence d'images sont des étoiles. Pour cette raison, le dispositif APP exploite les mesures les plus lumineuses pour déterminer les informations de déplacement des étoiles (soit une vitesse de déplacement des étoiles par image, soit un angle de rotation des étoiles par image).
[0097] À l'étape S220, le dispositif APP détermine les informations de déplacement des étoiles à partir de mesures sélectionnées.
[0098] Tout d'abord, le dispositif APP détermine si les trajectoires des étoiles sont sensiblement rectilignes dans la séquence d'images IMG_SEQ, ou si celle-ci sont sensiblement circulaires. Pour ce faire, il peut déterminer si les normales des trajectoires des étoiles se croisent à proximité d'un centre d'observation (i.e. si l'intersection de ces normales est proche du centre d'observation).
[0099] En fait, si la séquence d'images IMG_SEQ est acquise par un observatoire situé près de l'équateur, les trajectoires des étoiles sont sensiblement rectilignes. Le dispositif APP détermine alors la vitesse moyenne des étoiles par image. En d'autres termes, il détermine le vecteur de déplacement des étoiles d'une image à l'autre (e.g. -5,1 pixels/image selon l'axe, et -1,2 pixels/image selon axe y). Pour déterminer ce vecteur de déplacement, le dispositif APP calcule la moyenne des distances entre chacune des mesures et son voisin le plus proche dans l'image suivante.
[0100] En revanche, si la séquence d'images IMG_SEQ est acquise par un observatoire situé près des pôles, les trajectoires des étoiles sont sensiblement circulaires. Dans ce cas, le dispositif APP détermine le centre de rotation des étoiles (i.e. l'intersection des normales), ainsi que l'angle de rotation des étoiles d'une image à l'autre (e.g. 3,2 degré/image). [0101] À l'étape S230, le dispositif APP élimine, en utilisant les informations de déplacement des étoiles, les mesures considérées comme provenant d'étoiles.
[0102] Selon un mode de réalisation, le dispositif APP réalise l'étape S230 de la manière suivante. Pour chaque objet spatial observé, le dispositif APP prédit ses positions dans les autres images de la séquence en supposant que cet objet est une étoile. Si ces prédictions s'avèrent correctes, alors le dispositif APP considère que l'objet est une étoile et élimine la mesure associée.
[0103] Plus précisément, pour chaque mesure de chaque image de la séquence, le dispositif APP prédit les positions de l'objet dans les autres images de la séquence en utilisant les informations de déplacement des étoiles. Si le nombre de positions prédites considérées comme correctes est supérieur à un seuil, le dispositif APP élimine la mesure considérée. Une position prédite est considérée comme correcte lorsqu'il existe une mesure présente dans l'image et dont la distance à la position prédite est inférieure à un seuil.
[0104] À l'étape S240, le dispositif APP élimine, parmi les mesures restantes, les mesures isolées dans la séquence d'images IMG_SEQ.
[0105] Spécifiquement, le dispositif APP identifie les mesures qui ne possèdent pas de voisins proches, et élimine ces mesures. Une mesure est considérée comme n'ayant pas de voisins proches lorsqu'il n'y a aucune mesure située à proximité de celle-ci, c'est-à-dire aucune mesure comprise en dessous d'un seuil de distance. Le dispositif APP considère notamment l'image dans laquelle se trouve la mesure, mais également les images précédentes et suivantes (e.g. les deux images précédentes, et les deux suivantes).
[0106] Selon un mode de réalisation, le dispositif APP peut également éliminer les mesures localisées sur les bords (i.e. comprises en dessous d'une distance donnée des bords des images) dans les premières images ou les dernières images de la séquence IMG_SEQ.
[0107] Suite à ces étapes, le dispositif APP obtient un ensemble de mesures filtré SFLT, dans lequel les mesures considérées comme associées à des étoiles ont été éliminées.
[0108] Cet ensemble SFLT est ensuite utilisé par le dispositif APP pour détecter les trajectoires de satellites TRJ dans la séquence d'images IMG_SEQ. En particulier, nous décrivons en référence aux figures 5 et 7 deux modes de réalisation de la détection et de la classification des trajectoires de satellites.
[0109] La figure 5 représente un exemple d'architecture d'un dispositif de suivi de satellites dans une séquence d'images selon un mode de réalisation de l'invention. Cette figure illustre un premier mode de réalisation du détecteur DET et du classifieur CLA, précédemment introduits en référence aux figures 2 et 3.
[0110] Comme évoqué précédemment, lors de l'étape S300, le détecteur DET détecte des trajectoires de satellites TRJ dans la séquence d'images IMG_SEQ à partir de l'ensemble de mesures filtré SFLT. Ensuite, lors de l'étape S400, le classifieur CLA classe (i.e. segmente) les trajectoires TRJ. [OUI] Ce premier mode de réalisation propose d'utiliser des réseaux de neurones convolutifs pour mettre en oeuvre le détecteur DET, et d'utiliser des réseaux de neurones de type PointNet pour mettre en oeuvre le classifieur CLA.
[0112] Le détecteur DET comprend, selon ce premier mode réalisation, plusieurs réseaux de neurones convolutifs CNNLS, CNNHs, et CNNVHS- Chacun de ces réseaux prend en entrée une image dans laquelle est superposé l'ensemble des mesures filtré SFLT, et fournit en sortie des cadres BB englobant des trajectoires de satellites détectées (i.e. des « bounding boxes » en anglais). Un tel cadre Bm peut par exemple être défini de la manière suivante : Bm={xm, ym, hm, lm} avec xm et ym les coordonnées du centre du cadre, hm sa hauteur et lm sa largeur.
[0113] Les réseaux de neurones CNNLS, CNNHS, et CNNVHs sont respectivement dédiés (i.e. spécialisé, entrainé) à la détection de trajectoires de satellites de vitesses différentes. Notamment, le réseau CNNLS est entrainé pour détecter des trajectoires de satellites en orbite géostationnaire sensiblement fixe ou dérivante (i.e. des trajectoires à faible vitesse). Le réseau CNNHs est entrainé pour détecter des trajectoires de satellites en orbite moyenne ou basse et se déplaçant à grande vitesse (i.e. des trajectoires de type défilantes). Enfin, le réseau CNNVHS est entrainé pour détecter des trajectoires de satellites en orbite basse et se déplaçant à très grande vitesse (i.e. trajectoires de type trainées).
[0114] Le réseau CNNLs peut utiliser un réseau de neurones de type Faster R-CNN avec un réseau d'extraction de caractéristiques (i.e. « backbone network » en anglais) de type Inception V2. Les réseaux de type Faster R-CNN et leur mise en oeuvre sont par exemple décrits dans le document suivant : Ren et al., « Faster R-CNN : Towards Real-Time Object Detection with Region Proposal Networks », 2016. Et, les réseaux de type Inception V2 et leur mise en oeuvre sont par exemple décrits dans le document suivant : Szegedy et al., « Rethinking the Inception Architecture for Computer Vision », 2015.
[0115] En outre, les réseaux CNNHs et CNNVHS peuvent respectivement utiliser un réseau de neurones de type Faster R-CNN avec un réseau d'extraction de caractéristiques de type Resnet 101. Les réseaux de type ResNet 101 et leur mise en oeuvre sont par exemple décrits dans le document suivant : He et al., « Deep Residual Learning for Image Recognition », 2015.
[0116] L'entraînement des réseaux de neurones du détecteur DET est effectué en utilisant des données d'entrainement simulées, c'est-à-dire des images comprenant des trajectoires de satellites générées par ordinateur auxquelles du bruit est ajouté. Les réseaux de neurones peuvent également être pré-entrainés en utilisant des jeux de données publiques, tel que le jeu de données « COCO ».
[0117] Plus particulièrement, pour entrainer les réseaux de neurones de la solution proposée, il peut être envisagé de générer des données comprenant des trajectoires d'étoiles (circulaires ou rectilignes), des trajectoires d'objets spatiaux de différents types, et du bruit. Ensuite, les mesures sont filtrées pour éliminer les étoiles en utilisant la technique précédemment décrite en référence à la figure 3. Enfin, les mesures ainsi obtenues sont utilisées pour entrainer les réseaux de neurones.
[0118] Pour dédier le réseau CNNLS à la détection de trajectoires de satellites en orbite géostationnaire sensiblement fixe ou dérivante (i.e. des trajectoires à faible vitesse), il est entrainé en utilisant uniquement ces types de trajectoires. De même, le réseau CNNHs est entrainé en utilisant des trajectoires de type défilantes, et le réseau CNNVHS est entrainé en utilisant des trajectoires de type trainées.
[0119] Pour les détails de mise en oeuvre concernant l'entraînement des réseaux de neurones, notamment les fonctions de perte, l'homme du métier peut se référer aux documents précités et aux références citées dans ces documents.
[0120] Selon un mode de réalisation particulier, le réseau de neurones CNNLS traite par parties l'image dans laquelle est superposé l'ensemble des mesures filtré SFLT. En revanche, les réseaux CNNHS et CNNVHS prennent en entrée l'intégralité de cette image.
[0121] Le classifieur CLA comprend, selon ce premier mode de réalisation, plusieurs réseaux de neurones PNLs et PNHS de type PointNet. Ces réseaux PNLs et PNHS sont respectivement dédiés à la classification (i.e. la segmentation) de trajectoires de satellites TRJ de vitesses différentes.
[0122] D'une part, le réseau PNLS est entrainé pour classifier des trajectoires de satellites en orbite géostationnaire sensiblement fixe ou dérivante (i.e. les trajectoires à faibles vitesse). Comme illustré sur la figure 7, le réseau PNLS prend en entrée les cadres BB fournis par le réseau CNNLS, dédié à la détection de trajectoires à faible vitesse.
[0123] Le réseau PNLS traite séparément chacun des cadres BB. Pour chaque cadre Bm englobant une trajectoire Tm, il prend en entrée l'ensemble des mesures situées à l'intérieur du cadre Bm dans la séquence d'images IMG_SEQ. Notons également que les mesures situées dans le cadre Bm sont recentrées avant de les fournir au réseau PNLS de sorte que les coordonnées xm et ym du centre du cadre soient égales à 0.
[0124] Le réseau PNLS fournit en sortie un label à chacune des mesures situées dans le cadre Bm, ce label indiquant si la mesure appartient ou non à la trajectoire Tm. Ainsi, le réseau PNLs permet de séparer les mesures appartenant aux trajectoires TRJ du bruit. De plus, il fournit en sortie une classe Cm attribuée à la trajectoire Tm.
[0125] La liste des classes attribuables par le réseau PNLS est : trajectoire géostationnaire fixe ; trajectoire géostationnaire dérivante ; double trajectoires géostationnaires dérivantes (deux trajectoires dérivantes sont présentes dans un même cadre) ; et bruit.
[0126] D'autre part, le réseau PNHS est entrainé pour classifier des trajectoires de satellites en orbite moyenne ou basse (i.e. les trajectoires à grande vitesse). Comme illustré sur la figure 1, le réseau PNHS prend en entrée les cadres BB fournis par les réseaux CNNHS et CNNVHS, dédiés à la détection de trajectoires à grande vitesse. [0127] Le réseau PNHs traite séparément chacun des cadres BB. Pour le réseau PNHs, seules sont fournies les mesures autour des diagonales des cadres englobants BB (i.e. comprises en dessous d'un seuil de distance des diagonales). Ces mesures sont recentrées avant de les fournir au réseau PNHs de sorte que les coordonnées xm et ym du centre du cadre soient égales à 0. En outre, ces mesures sont normalisées avant de les fournir au réseau PNHs, et ce en divisant chacune des coordonnées des mesures par le maximum en valeur absolue des coordonnées en x et en y.
[0128] Le réseau PNHS fournit en sortie un label à chacune des mesures situées dans le cadre Bm, ce label indiquant si la mesure appartient ou non à la trajectoire Tm. Il fournit également en sortie une classe Cm attribuée à la trajectoire Tm.
[0129] La liste des classes attribuables par le réseau PNHS est : trajectoire à grande vitesse (trajectoire de type défilante ou de type trainée) ; et bruit. Ensuite, le dispositif APP peut distinguer les trajectoires de type défilantes et les trajectoires de type trainées comme suit. Les trajectoires de type défilantes comprennent en moyenne moins de 1,5 mesures par image, tandis que les trajectoires de type trainées comprennent en moyenne plus de 1,5 mesures par image.
[0130] Pour chaque cadre englobant Bm, le dispositif APP obtient ainsi : un ensemble de mesures associées à la trajectoire Tm={(xn, yn, in) I n e Nm} avec Nm les indices des mesures de la trajectoire ; et une classe Cm attribuée à la trajectoire Tm.
[0131] Les réseaux de type PointNet et leur mise en oeuvre sont par exemple décrits dans le document Qi et al. précédemment cité. Les réseaux PNLS et PNHs de type PointNet sont entrainés en utilisant des données simulées.
[0132] Pour dédier le réseau PNLs à la classification (segmentation) de trajectoires de satellites en orbite géostationnaire sensiblement fixe ou dérivante (i.e. des trajectoires à faible vitesse), il est entrainé en utilisant uniquement ces types de trajectoires. De même, le réseau PNHs est entrainé en utilisant des trajectoires de type défilantes et des trajectoires de type trainées (i.e. des trajectoires à grande vitesse).
[0133] À des fins d'illustration, la figure suivante représente les données traitées et obtenues par les différents modules du dispositif APP selon ce premier mode de réalisation.
[0134] La figure 6 représente des exemples d'images traitées par un dispositif de suivi de satellites selon un mode de réalisation de l'invention.
[0135] La première image IMG_SUP représente une superposition des images de la séquence IMG_SEQ obtenue par le module d'obtention OBT lors de l'étape S100.
[0136] La deuxième image IMG_SUP_FLT représente au sein d'une même image l'ensemble de mesures filtré SFLT obtenu par le filtre FLT suite à l'étape S200.
[0137] La troisième image IMG_TRJ_DET représente au sein d'une même image les cadres BB englobant les trajectoires de satellites détectées par le détecteur DET suite à l'étape S300. [0138] La quatrième image IMG_TRJ_CLA représente au sein d'une même image les trajectoires de satellites TRJ obtenues par le classifieur CLA suite à l'étape S400.
[0139] La cinquième image IMG_TRJ_PP représente au sein d'une même image les trajectoires de satellites TRJ obtenues par le module de traitement PP suite à l'étape S500.
[0140] Nous avons décrit ci-dessus un premier mode de réalisation du détecteur DET et du classifieur CLA du dispositif APP. Toutefois, dans le cadre de l'invention, d'autres modes de réalisation peuvent être envisagés. Aussi, nous décrivons ci-après en référence à la figure 7 un deuxième mode de réalisation de la détection et de la classification des trajectoires de satellites.
[0141] La figure 7 représente un exemple d'architecture d'un dispositif de suivi de satellites dans une séquence d'images selon un mode de réalisation de l'invention. Cette figure illustre un deuxième mode de réalisation du détecteur DET et du classifieur CLA, précédemment introduits en référence aux figures 2 et 3.
[0142] Le détecteur DET comprend, selon ce deuxième mode de réalisation, au moins un réseau de neurones TRF de type Transformer, c'est-à-dire un réseau comprenant un mécanisme d'attention. Les réseaux de neurones TRF de type Transformer et leur mise en oeuvre sont par exemple décrits dans le document A. Vaswani et al. précédemment cité.
[0143] Selon ce deuxième mode de réalisation, le réseau TRF du détecteur DET prend en entrée les mesures de l'ensemble SFLT, et fournit un vecteur latent LV pour chacune de ces mesures. Ensuite, un module d'association CLST du détecteur DET associe (i.e. regroupe) les mesures appartenant à une même trajectoire de satellite Tm en fonction des distances euclidiennes entre les vecteurs latents LV.
[0144] Le dispositif APP détecte ainsi les trajectoires TRJ respectives des différents satellites observés dans la séquence d'images IMG_SEQ. Plus précisément, pour chaque trajectoire détectée Tm, le dispositif APP obtient un ensemble de mesures associées à la trajectoire Tm={(xn, yn, in) | n e Nm} avec Nm les indices des mesures de la trajectoire.
[0145] À titre d'exemple, le module d'association CLST utilise une technique dite de regroupement hiérarchique aggloméré (« agglomerative hierarchical clustering » en anglais) avec un seuil de distance défini. Les détails de mise en oeuvre de la technique de regroupement hiérarchique aggloméré sont connus de l'homme du métier.
[0146] Toutefois, dans le cadre de l'invention, il pourrait être envisagé des modes de réalisation dans lesquels le module d'association CLST utilise d'autres algorithmes de regroupement pour associer les mesures appartenant à une même trajectoire de satellite à partir des distances entre les vecteurs latents.
[0147] Le classifieur CLA comprend, selon ce deuxième mode de réalisation, au moins un réseau de neurones de classification CN. Ce réseau de neurones CN traite séparément les différentes trajectoires de satellites détectées TRJ. Pour chaque trajectoire Tm, le réseau de classification CN prend en entrée les mesures associées à cette trajectoire Tm, et fournit en sortie une classe Cm attribuée à cette trajectoire Tm.
[0148] Aucune limitation n'est n'attachée à l'architecture du réseau de neurones de classification CN. Par exemple, le réseau CN peut être un perceptron multicouche, comprenant plusieurs couches denses avec des fonctions d'activation de type ReLU, et une couche de sortie avec une fonction d'activation de type Softmax.
[0149] Il convient de noter que les réseaux de neurones TRF et CN peuvent être entrainés à partir de données d'entrainement simulées (i.e. générées par ordinateur).
[0150] Dans le cadre de l'invention, il pourrait également être envisagé des modes de réalisation dans lesquels le détecteur DET comprend une pluralité de réseaux de neurones de type Transformer respectivement dédiés à la détection de trajectoires de satellites TRJ de vitesses différentes. De même, le classifieur CLA pourrait comprend une pluralité de réseaux de neurones de classification respectivement dédiés à la classification de trajectoires de satellites TRJ de vitesses différentes.
[0151] Suite à l'étape S300 de détection et à l'étape S400 de classification des trajectoires de satellites TRJ, le dispositif APP effectue lors de l'étape S500 différents opérations de posttraitement de ces trajectoires TRJ. Comme évoqué précédemment, l'étape S500 permet d'améliorer la fiabilité du suivi de satellites réalisé par le dispositif APP. Nous détaillons la mise en oeuvre de cette étape en référence à la figure suivante.
[0152] La figure 8 représente des étapes d'un procédé selon un mode de réalisation de l'invention pour effectuer des opérations de post-traitement de trajectoires de satellites. Cette figure détaille la mise en oeuvre de l'étape S500 introduite en référence aux figures 2 et 3.
[0153] Tel qu'illustré par la figure 8, et selon un mode de réalisation, l'étape S500 comprend tout ou partie des étapes S510 à S550 décrites ci-après et mises en oeuvre par le module de traitement PP du dispositif APP.
[0154] À l'étape S510, le dispositif APP fusionne (i.e. combine) des trajectoires de satellites TRJ pour regrouper les mesures associées à plusieurs trajectoires de satellite détectées TRJ et appartenant à un même un satellite. Ainsi, si des mesures appartenant à un même satellite ont été associées à plusieurs trajectoires par le dispositif APP, alors ces mesures sont regroupées au sein d'une même trajectoire.
[0155] Pour ce faire, le dispositif APP compare des trajectoires de satellites TRJ deux à deux, et fusionne ou non celles-ci en fonction du résultat de la comparaison.
[0156] Spécifiquement, le dispositif APP compare le nombre de mesures communes à deux trajectoires Tm et Tp. Si ce nombre est supérieure à un pourcentage donné (e.g. 20 %) du nombre de mesures de la plus petite des deux trajectoires, alors les mesures des deux trajectoires Tm et Tp sont regroupées au sein d'une unique trajectoire. En d'autres termes, le dispositif APP réalise alors l'union des deux trajectoires Tm et Tp.
[0157] Il est important de noter que le dispositif APP ne compare pas tous les types de trajectoires ensemble. D'une part, les trajectoires de type géostationnaires fixes sont comparées uniquement entre elles. D'autre part, les trajectoires géostationnaires dérivantes, de type défilantes, et de type trainées sont comparées ensemble.
[0158] À l'étape S520, le dispositif APP réalise une complétion des trajectoires de satellites TRJ de types défilantes, c'est-à-dire les trajectoires à grande vitesse et comprenant en moyenne moins de 1,5 mesures par image. Cette complétion utilise des régressions linéaires en trois dimensions.
[0159] Pour une trajectoire Tm d'un satellite, la complétion réalisée par le dispositif APP permet d'éliminer des mesures associées à la trajectoire Tm, mais n'appartenant pas à ce satellite. De plus, cette complétion permet d'ajouter des mesures appartenant au satellite et qui n'auraient pas été associées à la trajectoire Tm.
[0160] Pour chaque mesure de la trajectoire Tm, le dispositif APP prédit la position de l'objet en utilisant de la régression linéaire en trois dimensions déterminée à partir des mesures de la trajectoire Tm. S'il existe une autre mesure plus proche de la position prédite que la mesure considérée, alors la mesure considérée est éliminée de la trajectoire Tm, et est remplacée par l'autre mesure plus proche.
[0161] Pour chaque image ik de la séquence IMG_SEQ, le dispositif APP procède de la manière suivante. Si la trajectoire Tm comprend une mesure sur cette image ik, et si la distance entre cette mesure et une position prédite est supérieur à un seuil, alors la mesure est éliminée de la trajectoire Tm. Si la trajectoire Tm ne comprend pas de mesure sur cette image ik, et si la distance entre la position prédite et la mesure la plus proche de la position prédite est inférieure à un seuil, alors cette mesure est associée (i.e. ajoutée) à la trajectoire Tm.
[0162] À l'étape S530, le dispositif APP filtre les trajectoires TRJ de type trainée, c'est-à-dire les trajectoires à grande vitesse comprenant en moyenne plus de 1,5 mesures par image.
[0163] Pour chaque trajectoire Tm de type trainée, le dispositif APP détermine la pente et l'ordonnée à l'origine de la droite de régression linéaire formée par les mesures de la trajectoire Tm. Il élimine ensuite, parmi les mesures de la trajectoire Tm, celles qui s'écartent au-delà d'une distance donnée de la droite de régression linéaire.
[0164] Le dispositif APP élimine ainsi les mesures qui ne sont pas alignées le long de la trajectoire en deux dimensions. En ce sens, il réalise un polissage des trajectoires de type trainées.
[0165] À l'étape S540, le dispositif APP fusionne les trajectoires de type trainées. Cela permet d'éviter qu'une même trajectoire de type trainée ne soit détectée en plusieurs morceaux disjoints par le dispositif APP. À cet effet, le dispositif APP compare les trajectoires de types trainée entre elles, et fusionne ou non celles-ci en fonction du résultat de la comparaison. [0166] En fait, le dispositif compare deux à deux les droites de régression linéaire des trajectoires de type trainées. Pour deux trajectoires Tm et Tp de type trainées, si la différence entre leurs pentes est inférieure à un seuil, et si la différence entre leurs ordonnées à l'origine est inférieure à un autre seuil, alors le dispositif APP regroupe les mesures des deux trajectoires Tm et Tp au sein d'une unique trajectoire.
[0167] À l'étape S550, le dispositif APP filtre les trajectoires de satellites TRJ de sorte que chacune des trajectoires comprenne uniquement une mesure par image de la séquence IMG_SEQ.
[0168] Si une trajectoire Tm comprend plusieurs mesures sur une image de la séquence IMG_SEQ, le dispositif APP combine ces mesures pour obtenir une unique mesure. Par exemple, la position de l'unique mesure obtenue par le dispositif APP peut correspondre au barycentre des positions des mesures de la trajectoire Tm comprises dans cette image.
[0169] Variantes additionnelles : Il est à noter que l'ordre dans lequel s'enchaînent les étapes d'un procédé conforme à l'invention, notamment en référence aux dessins ci-joints, ne constitue qu'un exemple de réalisation dépourvu de tout caractère limitatif, des variantes étant possibles. En particulier, un procédé conforme à l'invention peut comprendre une ou plusieurs itérations des étapes décrites ci-dessus, notamment en référence aux dessins ci-joints. Par ailleurs, les signes de référence ne limitent pas l'étendue de la protection, leur unique fonction étant de faciliter la compréhension des revendications.
[0170] Un homme du métier comprendra que les modes de réalisation et variantes décrits ci-dessus ne constituent que des exemples non limitatifs de mise en oeuvre de l'invention. En particulier, l'homme du métier pourra envisager une quelconque adaptation ou combinaison des modes de réalisation et variantes décrits ci-dessus afin de répondre à un besoin bien particulier.

Claims

Revendications
1. Procédé de suivi de satellites dans une séquence d'images (IMG_SEQ), le procédé comprenant : une étape d'obtention (S100) d'un ensemble de mesures (SiN) associées à des objets spatiaux observés dans les images de la séquence (IMG_SEQ), chaque mesure comprenant une position d'un objet dans une image et un indice temporel de l'image ; une étape de détection (S300) de trajectoires de satellites (TRJ) dans la séquence d'images (IMG_SEQ), par un détecteur (DET) comprenant au moins un réseau de neurones et utilisant tout ou partie de l'ensemble de mesures obtenu (SiN) ; et une étape de classification (S400) des trajectoires de satellites détectées (TRJ), par un classifieur (CLA) comprenant au moins un autre réseau de neurones.
2. Procédé selon la revendication 1, dans lequel : le détecteur (DET) comprend au moins un réseau de neurones convolutif (CNN), et détermine (S200) des cadres (BB) englobant chacun une trajectoire de satellites (TRJ) dans les images de la séquence (IMG_SEQ) ; et le classifieur (CLA) comprend au moins un réseau de neurones de type PointNet, et pour chaque cadre (BB) englobant une trajectoire de satellite (TRJ), le classifieur (CLA) détermine (S300) les mesures situées dans le cadre appartenant à cette trajectoire, et attribue (S300) une classe à cette trajectoire.
3. Procédé selon la revendication 1, dans lequel le détecteur (DET) comprend au moins un réseau de neurones de type Transformer (TRF), et associe (S200) les mesures appartenant à une même trajectoire de satellite (TRJ) dans les images de la séquence (IMG_SEQ).
4. Procédé selon la revendication 3, dans lequel le détecteur (DET) détermine (S200) des vecteurs latents (LV) représentatifs de dites mesures (SFLT) en utilisant ledit au moins un réseau de neurones de type Transformer, et associe (S200) des mesures à une même trajectoire de satellite (TRJ) en fonction de distances entre les vecteurs latents (LV).
5. Procédé selon l'une quelconque des revendications 1 à 4, dans lequel : le détecteur (DET) comprend une pluralité de réseaux de neurones (CNNLS, CNNHS, CNNVHs) respectivement dédiés à la détection de trajectoires de satellites (TRJ) de vitesses différentes ; et le classifieur (CLA) comprend une pluralité de réseau de neurones (PNLS, PNHs) respectivement dédiés à la classification de trajectoires de satellites (TRJ) de vitesses différentes.
6. Procédé selon l'une quelconque des revendications 1 à 5, comprenant une étape de filtrage (S200) de l'ensemble de mesures (SiN) pour éliminer les mesures associées à des étoiles, et dans lequel le détecteur (DET) utilise uniquement l'ensemble de mesures filtré (SFLT) pour réaliser l'étape de détection (S300) de trajectoires de satellites (TRJ) dans la séquence d'images (IMG_SEQ).
7. Procédé selon la revendication 6, dans lequel l'étape de filtrage (S200) de l'ensemble de mesures (SIN) pour éliminer les mesures associées à des étoiles comprend : une détermination (S220) d'informations de déplacement des étoiles à partir de mesures dont la luminosité est supérieure à un seuil dans les images de la séquence (IMG_SEQ) ; et une étape d'élimination (S230) des mesures considérées comme associées à des étoiles à partir des informations de déplacement déterminées.
8. Procédé selon l'une quelconque des revendications 1 à 7, comprenant en outre : une ou plusieurs étapes de fusion (S510, S540) des trajectoires de satellites pour regrouper les mesures associées à plusieurs trajectoires de satellite détectées (TRJ) et appartenant à un même un satellite ; et une étape de filtrage (S550) des trajectoires de satellites (TRJ) pour qu'une dite trajectoire de satellite (TRJ) comprenne uniquement une mesure par image de la séquence (IMG_SEQ).
9. Dispositif (APP) de suivi de satellites dans une séquence d'images (IMG_SEQ), le dispositif (APP) comprenant : un module d'obtention (OBT) configuré pour obtenir (S100) un ensemble de mesures (S!N) associées à des objets spatiaux observés dans les images de la séquence (IMG_SEQ), chaque mesure comprenant une position d'un objet dans une image et un indice temporel de l'image ; un détecteur (DET) configuré pour détecter (S300) des trajectoires de satellites (TRJ) dans la séquence d'images (IMG_SEQ), le détecteur (DET) comprenant au moins un réseau de neurones et utilisant tout ou partie de l'ensemble de mesures obtenu (SiN) ; et un classifieur (CLA) configuré pour classer (S400) les trajectoires de satellites détectées (TRJ), le classifieur (CLA) comprenant au moins un autre réseau de neurones.
10. Système (SYS) de surveillance comprenant : un dispositif (APP) de suivi de satellites selon la revendication 9 ; et un dispositif (SENS) d'acquisition d'une séquence d'images (IMG_SEQ).
11. Programme d'ordinateur (PROG) comprenant des instructions pour mettre en oeuvre les étapes (S100-S600) d'un procédé selon l'une des revendications 1 à 8, lorsque ledit programme d'ordinateur (PROG) est exécuté par au moins un processeur (PROC).
12. Support d'informations (MEM) lisible par ordinateur comprenant un programme d'ordinateur (PROG) selon la revendication 11.
EP24745480.4A 2023-07-06 2024-07-05 Procede et dispositif de suivi de satellites dans une sequence d'images Pending EP4740187A1 (fr)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR2307195A FR3150891B1 (fr) 2023-07-06 2023-07-06 Procédé et dispositif de suivi de satellites dans une séquence d'images
PCT/FR2024/050918 WO2025008599A1 (fr) 2023-07-06 2024-07-05 Procede et dispositif de suivi de satellites dans une sequence d'images

Publications (1)

Publication Number Publication Date
EP4740187A1 true EP4740187A1 (fr) 2026-05-13

Family

ID=88689997

Family Applications (1)

Application Number Title Priority Date Filing Date
EP24745480.4A Pending EP4740187A1 (fr) 2023-07-06 2024-07-05 Procede et dispositif de suivi de satellites dans une sequence d'images

Country Status (4)

Country Link
EP (1) EP4740187A1 (fr)
AU (1) AU2024291267A1 (fr)
FR (1) FR3150891B1 (fr)
WO (1) WO2025008599A1 (fr)

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3120950B1 (fr) * 2021-03-17 2023-06-02 Share My Space Système de détection de la trajectoire d’objets mobiles

Also Published As

Publication number Publication date
FR3150891B1 (fr) 2025-08-01
AU2024291267A1 (en) 2026-02-05
FR3150891A1 (fr) 2025-01-10
WO2025008599A1 (fr) 2025-01-09

Similar Documents

Publication Publication Date Title
EP2400460B1 (fr) Procédé d'évaluation de la vitesse horizontale d'un drone, notamment d'un drone apte au vol stationnaire autopiloté
FR3073312A1 (fr) Procede d'estimation de pose d'une camera dans le referentiel d'une scene tridimensionnelle, dispositif, systeme de realite augmentee et programme d'ordinateur associe
EP1694058A1 (fr) Procédé et dispositif de capture d'images comprenant une mesure de mouvements locaux
FR2814312A1 (fr) Procede de segmentation d'une surface image video par objets elementaires
EP2795580A1 (fr) Procédé d'estimation de flot optique à partir d'un capteur asynchrone de lumière
EP2316082A1 (fr) Procede d'identification d'un objet dans une archive video
EP2930659B1 (fr) Procédé de détection de points d'intérêt dans une image numérique
WO2018185104A1 (fr) Procede d'estimation de pose, dispositif, systeme et programme d'ordinateur associes
EP3709049B1 (fr) Systeme de traitement radar et procede de debruitage associe
EP0961227B1 (fr) Procédé de détection de la profondeur relative entre deux objects dans une scène à partir d'un couple d'images issues de prises de vues différentes
EP3070643B1 (fr) Procédé et système de reconnaissance d'objets par analyse de signaux d'image numérique d'une scène
FR2916562A1 (fr) Procede de detection d'un objet en mouvement dans un flux d'images
WO2025008599A1 (fr) Procede et dispositif de suivi de satellites dans une sequence d'images
EP4439478A1 (fr) Procédé de suivi d'objets multiples
EP3701492A1 (fr) Procede de restauration d'images
EP2943935B1 (fr) Estimation de mouvement d'une image
EP4191530A1 (fr) Procédé de localisation et cartographie simultanées intégrant un masquage temporel auto-supervisé et modèle d'apprentissage automatique pour générer un tel masquage
FR3127837A1 (fr) Procédé d’analyse de la surface d’un toit d’un bâtiment
WO2021105604A1 (fr) Procédé et dispositif de traitement d'images
EP3274914A1 (fr) Procédé de dénombrement d'objets dans une zone spatiale prédéterminée
FR3146534A1 (fr) Procede d’estimation d’une carte de profondeur d’une image monoculaire et dispositifs associes
EP4439484A1 (fr) Procédé de classification de données multidimensionnelles fortement résolues
FR3128015A1 (fr) Système d’aide à la navigation d’un véhicule.
WO2024009026A1 (fr) Procede et dispositif de classification et de localisation d'objets dans des sequences d'images, systeme, programme d'ordinateur et support d'informations associes
EP1426901B1 (fr) Procédé pour détecter des cibles ponctuelles et système de veille mettant en oeuvre ce procédé de détection de cibles

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: UNKNOWN

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20260107

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC ME MK MT NL NO PL PT RO RS SE SI SK SM TR