FR3076039A1 - ADAPTIVE SYSTEM AND METHOD FOR AUTOMATICALLY TRACKING AT LEAST ONE TARGET IN AT LEAST ONE VIDEO STREAM - Google Patents

ADAPTIVE SYSTEM AND METHOD FOR AUTOMATICALLY TRACKING AT LEAST ONE TARGET IN AT LEAST ONE VIDEO STREAM Download PDF

Info

Publication number
FR3076039A1
FR3076039A1 FR1763231A FR1763231A FR3076039A1 FR 3076039 A1 FR3076039 A1 FR 3076039A1 FR 1763231 A FR1763231 A FR 1763231A FR 1763231 A FR1763231 A FR 1763231A FR 3076039 A1 FR3076039 A1 FR 3076039A1
Authority
FR
France
Prior art keywords
video stream
tracking
target
monitoring
tracking device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
FR1763231A
Other languages
French (fr)
Inventor
Florent TROLAT
Sophie GUEGAN-MARAT
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bull SA
Original Assignee
Bull SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bull SA filed Critical Bull SA
Priority to FR1763231A priority Critical patent/FR3076039A1/en
Priority to FR1850437A priority patent/FR3076042B1/en
Priority to EP18212481.8A priority patent/EP3506202B1/en
Priority to US16/227,213 priority patent/US11042995B2/en
Priority to CN201811599955.8A priority patent/CN109961002A/en
Publication of FR3076039A1 publication Critical patent/FR3076039A1/en
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/292Multi-camera tracking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/20Processor architectures; Processor configuration, e.g. pipelining
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/41Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G06V20/42Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30232Surveillance

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

Ce système comporte : au moins un dispositif de suivi (141,...14n), recevant un flux vidéo et configurable dynamiquement, conçu pour la détection et le suivi automatique d'au moins une cible par analyse du flux vidéo ; un calculateur (20) de valeur métrique de performance à partir d'un résultat de suivi de cible (R1,...Rn) fourni par le dispositif de suivi (141,...14n) ; un correcteur (26) de paramètre de configuration du dispositif de suivi (141,...4n) en fonction de la valeur métrique de performance ; et un configurateur dynamique (161,...16n) du dispositif de suivi (141,...14n) par application du paramètre de configuration corrigé. Il comporte en outre un dispositif de suivi supplémentaire de référence (14MSTR), recevant au moins une portion du flux vidéo, et le calculateur (20) calcule la valeur métrique de performance à partir d'une comparaison, sur la portion de flux vidéo, du résultat de suivi de cible (R1,..., Rn) fourni par le dispositif de suivi (141,..., 14n) et d'un résultat de suivi de référence (S1,..., Sn) fourni par le dispositif de suivi supplémentaire de référence (14MSTR).This system comprises: at least one tracking device (141,...14n), receiving a video stream and dynamically configurable, designed for the detection and automatic tracking of at least one target by analyzing the video stream; a performance metric value calculator (20) based on a target tracking result (R1,...Rn) provided by the tracking device (141,...14n); a corrector (26) for the configuration parameter of the tracking device (141,...4n) as a function of the performance metric value; and a dynamic configurator (161,...16n) of the tracker (141,...14n) by applying the corrected configuration parameter. It further comprises an additional reference tracking device (14MSTR), receiving at least a portion of the video stream, and the calculator (20) calculates the performance metric value from a comparison, on the video stream portion, the target tracking result (R1,..., Rn) provided by the tracking device (141,..., 14n) and a reference tracking result (S1,..., Sn) provided by the additional reference tracking device (14MSTR).

Description

La présente invention concerne un système adaptatif de suivi automatique d’au moins une cible dans au moins un flux vidéo. Elle concerne également un procédé et un programme d’ordinateur correspondants.The present invention relates to an adaptive system for automatically monitoring at least one target in at least one video stream. It also relates to a corresponding method and computer program.

Par « cible », on entend un objet ou un être vivant, humain ou animal, détectable et destiné à être suivi automatiquement dans le ou les flux vidéo à l’aide de méthodes connues pouvant être implémentées par micro programmation ou micro câblage dans le dispositif de suivi qui est lui-même un dispositif informatique ou électronique. En d’autres termes la cible est l’objet ou l’être vivant à situer en temps réel dans l’espace et le temps à partir d’une perception d’une scène fournie par une ou plusieurs caméras vidéo.By “target” is meant a living object or being, human or animal, detectable and intended to be automatically tracked in the video stream or streams using known methods which can be implemented by micro programming or micro wiring in the device. which is itself a computer or electronic device. In other words, the target is the object or living being to be located in real time in space and time from a perception of a scene provided by one or more video cameras.

Les domaines d’application comportent la détection et le suivi automatique en temps réel d’une cible dans un flux vidéo, la détection et le suivi automatique d’une cible dans plusieurs flux vidéo fournis parallèlement par plusieurs caméras (fonctionnalité généralement connue sous le nom de « suivi multi-cibles temps-réel »), mais aussi la détection et le suivi automatique de plusieurs cibles dans plusieurs flux vidéo fournis parallèlement par plusieurs caméras (fonctionnalité généralement connue sous le nom de « suivi multi-cibles multi-caméras temps-réel »).The fields of application include the detection and automatic tracking in real time of a target in a video stream, the detection and automatic tracking of a target in several video streams supplied in parallel by several cameras (functionality generally known as "real-time multi-target tracking"), but also the automatic detection and monitoring of several targets in several video streams provided in parallel by several cameras (functionality generally known as "multi-target multi-target time tracking" real ”).

Le suivi multi-cibles multi-caméras en particulier est une opération complexe nécessitant la mise en œuvre d’algorithmes sophistiqués engendrant une quantité de calculs importante. Il nécessite l’utilisation conjointe et simultanée de plusieurs composants électroniques tels que des unités centrales de traitement CPU (de l’anglais « Central Processing Unit »), des puces électroniques spécialisées dans le décodage vidéo, des processeurs graphiques ou unités graphiques de traitement GPU (de l’anglais « Graphie Processing Unit »), etc. Par ailleurs, les algorithmes mis en œuvre dans la chaîne de traitement de suivi multi-cibles multi-caméras présentent un nombre important de paramètres de configuration influençant à la fois la qualité du suivi et la sollicitation des ressources matérielles.Multi-camera multi-target tracking in particular is a complex operation requiring the implementation of sophisticated algorithms generating a large quantity of calculations. It requires the joint and simultaneous use of several electronic components such as central processing units (Central Processing Unit), electronic chips specialized in video decoding, graphics processors or graphics processing units GPU (from the English "Graphie Processing Unit"), etc. In addition, the algorithms implemented in the multi-target multi-camera tracking processing chain present a large number of configuration parameters influencing both the quality of the tracking and the solicitation of material resources.

Dans le domaine de la vidéosurveillance, il est en outre courant d’utiliser un très grand nombre de caméras : par exemple de quelques centaines de caméras dans des lieux publics fermés jusqu’à plusieurs milliers ou dizaines de milliers en extérieur. Une optimisation continue du compromis entre la qualité du suivi et la sollicitation des ressources matérielles devient alors indispensable, faute de quoi les coûts en calculs deviendraient rapidement prohibitifs.In the field of video surveillance, it is also common to use a very large number of cameras: for example a few hundred cameras in closed public places up to several thousand or tens of thousands outdoors. Continuous optimization of the compromise between the quality of monitoring and the solicitation of material resources then becomes essential, failing which the calculation costs would quickly become prohibitive.

Par ailleurs, le partage dynamique des ressources matérielles devient un enjeu majeur dans un contexte de polyvalence de ces dernières. Par exemple, à chaque instant la priorité peut être donnée au suivi d’une cible en particulier, quitte à réduire temporairement la qualité des autres suivis. Pour implémenter cette flexibilité il faut être capable d’adapter continûment le suivi pour qu’il fonctionne selon une optimisation prédéterminée visant à réduire la sollicitation des ressources matérielles tout en conservant un certain niveau de qualité. L'invention s’applique ainsi plus particulièrement à un système adaptatif de suivi automatique de cible dans au moins un flux vidéo, comportant : - au moins un dispositif de suivi, recevant ledit au moins un flux vidéo et configurable dynamiquement, conçu pour la détection et le suivi automatique d’au moins une cible par analyse dudit au moins un flux vidéo, - un calculateur d’au moins une valeur métrique de performance à partir d’un résultat de suivi de cible fourni par ledit au moins un dispositif de suivi, - un correcteur d’au moins un paramètre de configuration dudit au moins un dispositif de suivi en fonction de ladite au moins une valeur métrique de performance, et - au moins un configurateur dynamique dudit au moins un dispositif de suivi par application dudit au moins un paramètre de configuration corrigé.In addition, the dynamic sharing of material resources becomes a major issue in a context of their versatility. For example, at any time, priority can be given to monitoring a specific target, even if it means temporarily reducing the quality of other monitoring. To implement this flexibility, you must be able to continuously adapt the monitoring so that it operates according to a predetermined optimization aimed at reducing the demand on material resources while maintaining a certain level of quality. The invention thus applies more particularly to an adaptive automatic target tracking system in at least one video stream, comprising: - at least one tracking device, receiving said at least one dynamically configurable video stream, designed for detection and automatic monitoring of at least one target by analysis of said at least one video stream, a calculator of at least one performance metric value from a target tracking result provided by said at least one tracking device , - a corrector of at least one configuration parameter of said at least one monitoring device as a function of said at least one performance metric value, and - at least one dynamic configurator of said at least one monitoring device by application of said at least a corrected configuration parameter.

Un tel système est par exemple envisagé dans l’article d’Igual et al, intitulé « Adaptive tracking algorithme to improve the use of computing resources », publié dans IET Computer Vison, volume 7, n° 6, pages 415 à 424 (2013). Il est conçu pour détecter des situations à risque en termes de suivi, c’est-à-dire des situations dans lesquelles le ou les dispositif(s) de suivi est ou sont susceptible(s) de commettre des erreurs de détection ou de suivi, pour adapter de manière automatique les capacités de calculs (i.e. la sollicitation des ressources matérielles) ou changer d’algorithme de suivi. A cet effet, il est capable de calculer au moins une valeur métrique de performance à partir d’un résultat de suivi de cible fourni par le ou les dispositif(s) de suivi et de s’en servir pour adapter dynamiquement ses paramètres de configuration.Such a system is for example envisaged in the article by Igual et al, entitled "Adaptive tracking algorithm to improve the use of computing resources", published in IET Computer Vison, volume 7, n ° 6, pages 415 to 424 (2013 ). It is designed to detect risk situations in terms of monitoring, that is to say situations in which the monitoring device (s) is or are likely to commit detection or monitoring errors. , to automatically adapt the calculation capacities (ie the solicitation of material resources) or change the tracking algorithm. For this purpose, it is capable of calculating at least one performance metric value from a target tracking result provided by the tracking device (s) and of using it to dynamically adapt its configuration parameters. .

Mais la détection des situations à risque n’est pas un problème simple à résoudre et la façon dont l’article d’Igual et al précité l’aborde n’est pas pleinement satisfaisante. Elle engendre pas mal d’incertitudes sur sa fiabilité.However, the detection of risk situations is not a simple problem to solve and the way in which the article by Igual et al mentioned above is not fully satisfactory. It creates a lot of uncertainty about its reliability.

Il peut ainsi être souhaité de prévoir un système adaptatif de suivi automatique de cible dans au moins un flux vidéo qui permette de s’affranchir d’au moins une partie des problèmes et contraintes précités.It may thus be desired to provide an adaptive automatic target tracking system in at least one video stream which makes it possible to overcome at least some of the above problems and constraints.

Il est donc proposé un système adaptatif de suivi automatique de cible dans au moins un flux vidéo, comportant : - au moins un dispositif de suivi, recevant ledit au moins un flux vidéo et configurable dynamiquement, conçu pour la détection et le suivi automatique d’au moins une cible par analyse dudit au moins un flux vidéo, - un calculateur d’au moins une valeur métrique de performance à partir d’un résultat de suivi de cible fourni par ledit au moins un dispositif de suivi, - un correcteur d’au moins un paramètre de configuration dudit au moins un dispositif de suivi en fonction de ladite au moins une valeur métrique de performance, - au moins un configurateur dynamique dudit au moins un dispositif de suivi par application dudit au moins un paramètre de configuration corrigé, et - au moins un dispositif de suivi supplémentaire de référence, recevant au moins une portion dudit au moins un flux vidéo, le calculateur étant plus précisément conçu pour calculer ladite au moins une valeur métrique de performance à partir d’une comparaison, sur ladite au moins une portion de flux vidéo, du résultat de suivi de cible fourni par ledit au moins un dispositif de suivi et d’un résultat de suivi de référence fourni par ledit au moins un dispositif de suivi supplémentaire de référence.An adaptive automatic target tracking system is therefore proposed in at least one video stream, comprising: - at least one tracking device, receiving said at least one video stream and dynamically configurable, designed for automatic detection and tracking of at least one target by analysis of said at least one video stream, - a calculator of at least one performance metric value from a target tracking result provided by said at least one tracking device, - a corrector for at least one configuration parameter of said at least one monitoring device as a function of said at least one performance metric value, - at least one dynamic configurator of said at least one monitoring device by application of said at least one corrected configuration parameter, and - at least one additional reference tracking device, receiving at least a portion of said at least one video stream, the computer being more precisely designed to calculate said at least one performance metric value from a comparison, on said at least one portion of video stream, of the target tracking result provided by said at least one tracking device and of a reference tracking result provided by said at least one additional reference tracking device.

Ainsi, les situations à risque sont détectées de façon nettement plus fiable et l’optimisation des ressources matérielles qui en résulte compense largement le surcoût engendré par l’ajout du ou des dispositif(s) de suivi de référence.Thus, risk situations are detected in a much more reliable way and the optimization of the material resources which results largely compensates for the additional cost generated by the addition of the reference monitoring device (s).

De façon optionnelle, un système adaptatif de suivi automatique de cible selon l’invention peut en outre comporter au moins un dispositif de capture vidéo, relié en transmission de données audit au moins un dispositif de suivi et audit au moins un dispositif de suivi supplémentaire de référence, pour la fourniture respective dudit au moins un flux vidéo et de ladite au moins une portion dudit au moins un flux vidéo.Optionally, an adaptive automatic target tracking system according to the invention may also comprise at least one video capture device, connected in data transmission to said at least one tracking device and to said at least one additional tracking device of reference, for the respective supply of said at least one video stream and of said at least one portion of said at least one video stream.

Il est également proposé un procédé adaptatif de suivi automatique de cible dans au moins un flux vidéo, comportant les étapes suivantes : - analyse dudit au moins un flux vidéo, à l’aide d’au moins un dispositif de suivi, configurable dynamiquement, conçu pour la détection et le suivi automatique d’au moins une cible dans ledit au moins un flux vidéo, - calcul d’au moins une valeur métrique de performance à partir d’un résultat de suivi de cible fourni par ledit au moins un dispositif de suivi, - correction d’au moins un paramètre de configuration dudit au moins un dispositif de suivi en fonction de ladite au moins une valeur métrique de performance, et - configuration dynamique dudit au moins un dispositif de suivi par application dudit au moins un paramètre de configuration corrigé, le procédé comportant en outre la fourniture d’au moins une portion dudit au moins un flux vidéo à au moins un dispositif de suivi supplémentaire de référence, et le calcul de ladite au moins une valeur métrique de performance étant plus précisément réalisé à partir d’une comparaison, sur ladite au moins une portion de flux vidéo, du résultat de suivi de cible fourni par ledit au moins un dispositif de suivi et d’un résultat de suivi de référence fourni par ledit au moins un dispositif de suivi supplémentaire de référence.An adaptive automatic target tracking method is also proposed in at least one video stream, comprising the following steps: - analysis of said at least one video stream, using at least one dynamically configurable tracking device designed for the automatic detection and monitoring of at least one target in said at least one video stream, - calculation of at least one performance metric value from a target tracking result provided by said at least one monitoring, - correction of at least one configuration parameter of said at least one monitoring device as a function of said at least one performance metric value, and - dynamic configuration of said at least one monitoring device by application of said at least one parameter of corrected configuration, the method further comprising providing at least a portion of said at least one video stream to at least one additional reference tracking device, and l e calculation of said at least one performance metric value being more precisely carried out from a comparison, on said at least one portion of video stream, of the target tracking result provided by said at least one tracking device and a reference tracking result provided by said at least one additional reference tracking device.

Il est également proposé un programme d’ordinateur téléchargeable depuis un réseau de communication et/ou enregistré sur un support lisible par ordinateur et/ou exécutable par un processeur, comprenant des instructions pour l’exécution des étapes d’un procédé adaptatif de suivi automatique de cible dans au moins un flux vidéo selon l’invention, lorsque ledit programme est exécuté sur un ordinateur. L’invention sera mieux comprise à l’aide de la description qui va suivre, donnée uniquement à titre d’exemple et faite en se référant aux dessins annexés dans lesquels : - la figure 1 représente schématiquement la structure générale d’un système adaptatif de suivi automatique de cible dans au moins un flux vidéo, selon un mode de réalisation de l’invention, - la figure 2 illustre les étapes successives d’un procédé de suivi automatique de cible mis en œuvre par le système de la figure 1, - la figure 3 représente schématiquement un exemple de première architecture simplifiée pour le système de la figure 1, et - la figure 4 représente schématiquement un exemple de deuxième architecture mutualisée et découplée pour le système de la figure 1.There is also a computer program downloadable from a communication network and / or recorded on a computer-readable medium and / or executable by a processor, comprising instructions for the execution of the steps of an adaptive automatic tracking method. target in at least one video stream according to the invention, when said program is executed on a computer. The invention will be better understood with the aid of the description which follows, given solely by way of example and made with reference to the appended drawings in which: - Figure 1 schematically represents the general structure of an adaptive system of automatic target tracking in at least one video stream, according to one embodiment of the invention, - Figure 2 illustrates the successive steps of an automatic target tracking process implemented by the system of Figure 1, - FIG. 3 schematically represents an example of a first simplified architecture for the system of FIG. 1, and FIG. 4 schematically represents an example of a second shared and decoupled architecture for the system of FIG. 1.

Le système adaptatif de suivi automatique de cible de la figure 1 comporte au moins un dispositif de capture vidéo pour la fourniture d’au moins un flux vidéo. Dans l’exemple non limitatif illustré, il en comporte n, plus précisément n caméras vidéo 10i, ..., 10j,..., 10n pour la fourniture de n flux vidéo. Chacune d’elles filme une scène et transmet le flux vidéo correspondant par connexion informatique.The adaptive automatic target tracking system of Figure 1 includes at least one video capture device for providing at least one video stream. In the nonlimiting example illustrated, it includes n, more precisely n video cameras 10i, ..., 10j, ..., 10n for the supply of n video streams. Each of them films a scene and transmits the corresponding video stream by computer connection.

Il comporte en outre un collecteur 12 des n flux vidéo pour leur transmission vers un étage primaire de dispositifs de suivi conçus pour la détection et le suivi automatique d’au moins une cible par analyse des flux vidéo qu’ils reçoivent respectivement.It further comprises a collector 12 of the n video streams for their transmission to a primary stage of tracking devices designed for the detection and automatic tracking of at least one target by analysis of the video streams they receive respectively.

Dans l’exemple illustré, l’étage primaire comporte : - n dispositifs de suivi 14u ..., 14,, 14n pour le traitement respectif des n flux vidéo issus des n caméras vidéo 101; 10,, 10n, et transmis par le collecteur 12, et - selon un premier aspect de la présente invention, un dispositif de suivi supplémentaire de référence 14MStr pour le traitement de portions respectives des n flux vidéo issus des n caméras vidéo 101; ..., 10,, ..., 10n, ces portions étant sélectionnées et transmises par le collecteur 12.In the example illustrated, the primary stage comprises: - n monitoring devices 14u ..., 14 ,, 14n for the respective processing of the n video streams originating from the n video cameras 101; 10 ,, 10n, and transmitted by the collector 12, and - according to a first aspect of the present invention, an additional reference monitoring device 14MStr for the processing of respective portions of the n video streams from the n video cameras 101; ..., 10 ,, ..., 10n, these portions being selected and transmitted by the collector 12.

Chacun des n dispositifs de suivi 141; ..., 14i; ..., 14n est par exemple apte à détecter et suivre simultanément en temps réel plusieurs cibles visibles dans le flux vidéo qu’il reçoit. De tels dispositifs, matériels ou logiciels, sont bien connus dans l’état de la technique et ne seront pas détaillés davantage. Ils sont configurables dynamiquement à l’aide d’un ou plusieurs paramètres permettant d’influer sur leur consommation en ressources matérielles, leurs performances et la qualité de leurs résultats en termes de suivi de cibles : par exemple un nombre d’images à traiter ou exploiter par seconde dans le flux vidéo, une résolution d’images, un nombre maximal de cibles à détecter et suivre dans le flux vidéo, etc. La configuration dynamique consiste à pouvoir modifier ces paramètres de configuration pendant leur exécution. Pour cela, ils sont respectivement associés à n configurateurs dynamiques 16i, ..., 16,, ..., 16n qui sont matériellement conçus ou logiciellement programmés pour stocker, régler et appliquer dynamiquement ces paramètres de configuration.Each of the n monitoring devices 141; ..., 14i; ..., 14n is for example capable of simultaneously detecting and tracking several visible targets in real time in the video stream it receives. Such devices, hardware or software, are well known in the art and will not be detailed further. They are dynamically configurable using one or more parameters allowing them to influence their consumption of material resources, their performance and the quality of their results in terms of target tracking: for example a number of images to be processed or exploit per second in the video stream, an image resolution, a maximum number of targets to be detected and track in the video stream, etc. Dynamic configuration consists of being able to modify these configuration parameters during their execution. For this, they are respectively associated with n dynamic configurators 16i, ..., 16 ,, ..., 16n which are physically designed or software programmed to store, adjust and dynamically apply these configuration parameters.

Selon un deuxième aspect de la présente invention, ils sont en outre respectivement associés à n dispositifs de mesure 18!, ..., 18,, ..., 18n qui sont matériellement conçus ou logiciellement programmés pour mesurer une ou plusieurs valeurs représentatives d’une sollicitation ou exploitation de ressources matérielles par les n dispositifs de suivi 14!, ..., 14,, ..., 14n. Ces valeurs peuvent comporter une fréquence de fonctionnement des unités matérielles CPU et GPU sollicitées, un taux d’utilisation d’espace mémoire alloué, un débit d’entrée ou de sortie de données, un nombre d’images traitées ou exploitées par seconde dans le flux vidéo, un nombre de coeurs de calculs utilisés dans les unités matérielles CPU et GPU sollicitées, etc.According to a second aspect of the present invention, they are also respectively associated with n measurement devices 18 !, ..., 18 ,, ..., 18n which are materially designed or software programmed to measure one or more values representative of '' solicitation or exploitation of material resources by the n monitoring devices 14 !, ..., 14 ,, ..., 14n. These values may include an operating frequency of the CPU and GPU hardware units used, a rate of use of allocated memory space, a data input or output rate, a number of images processed or used per second in the video stream, a number of cores used in the CPU and GPU hardware units used, etc.

On remarquera que le nombre d’images traitées ou exploitées par seconde dans le flux vidéo est un paramètre qui peut à la fois être configuré (à l’aide des n configurateurs dynamiques 16i,16,,16n) et mesuré (à l’aide des n dispositifs de mesure 18i, 18,, 18n). En effet, ce n’est pas parce qu’un objectif consistant en un certain nombre d’images à traiter ou exploiter par seconde est fixé à l’aide de l’un des configurateurs^!, ..., 16,, ..., 16n qu’il est nécessairement atteint. Cet objectif peut être notamment temporairement entravé par des ressources matérielles insuffisantes et il est avantageux de pouvoir le mesurer.Note that the number of images processed or used per second in the video stream is a parameter which can be both configured (using the n dynamic configurators 16i, 16,, 16n) and measured (using n measuring devices 18i, 18 ,, 18n). In fact, it is not because a target consisting of a certain number of images to be processed or used per second is set using one of the configurators ^ !, ..., 16 ,,. .., 16n that it is necessarily reached. This objective can in particular be temporarily hampered by insufficient material resources and it is advantageous to be able to measure it.

Ainsi, en jouant dynamiquement sur les paramètres de configuration et en mesurant également régulièrement la sollicitation des ressources matérielles, il devient réellement possible d’optimiser automatiquement les traitements réalisés par les n dispositifs de suivi 141;..., 14,,..., 14n dans la limite des ressources disponibles.Thus, by dynamically playing on the configuration parameters and also regularly measuring the demand on hardware resources, it really becomes possible to automatically optimize the processing performed by the n monitoring devices 141; ..., 14 ,, ... , 14n within the limits of available resources.

Les portions de flux vidéo transmises au dispositif de suivi supplémentaire de référence 14Mstr sont successivement sélectionnées par le collecteur 12 selon une règle algorithmique de sélection quelconque prédéterminée, par exemple selon un ordonnancement périodique des n caméras vidéo 10i,..., 10,,..., 10n. Dans l’exemple de la figure 1, n portions Pi, ..., P,, ..., Pn sont successivement sélectionnées et extraites des n flux vidéo fournis par les n caméras vidéo 10i, ..., 10,, ..., 10n. Elles sont avantageusement chacune de durée suffisamment courte pour ne pas contraindre le dispositif de suivi supplémentaire de référence 14Mstr à un traitement en temps réel. Par exemple, chaque portion de flux vidéo peut présenter une durée inférieure à un dixième, voire un centième, du temps qui est laissé au dispositif de suivi supplémentaire de référence 14Mstr pour réaliser son analyse. Ainsi, ce dernier peut disposer, contrairement aux n dispositifs de suivi 14!, ..., 14,, ..., 14n, de ressources matérielles plus performantes, déportées, ..., tant en mémoire qu’en capacités de calcul. Il peut donc être considéré que les traitements de détection et suivi réalisés par le dispositif de suivi supplémentaire de référence 14Mstr sont optimaux, ou au moins de niveaux de qualité et de ressources supérieurs, en comparaison avec les n dispositifs de suivi 14!, ..., 14,, ..., 14n. C’est la raison pour laquelle les résultats fournis par ce dispositif de suivi supplémentaire de référence 14Mstr peuvent être considérés comme constituant une référence, sans erreur de détection de cibles ni de suivi, à laquelle peuvent être comparés les résultats fournis par les n dispositifs de suivi 14i, ..., 14,, ..., 14n, selon le premier aspect de la présente invention.The video stream portions transmitted to the additional reference tracking device 14Mstr are successively selected by the collector 12 according to any predetermined algorithmic selection rule, for example according to a periodic scheduling of the n video cameras 10i, ..., 10 ,,. .., 10n. In the example of FIG. 1, n portions Pi, ..., P ,, ..., Pn are successively selected and extracted from the n video streams supplied by the n video cameras 10i, ..., 10 ,,. .., 10n. They are each advantageously of sufficiently short duration so as not to constrain the additional reference monitoring device 14Mstr to processing in real time. For example, each portion of video stream can have a duration of less than one tenth, or even one hundredth, of the time which is left to the additional reference monitoring device 14Mstr to carry out its analysis. Thus, unlike the n monitoring devices 14 !, ..., 14 ,, ..., 14n, the latter can have more efficient, remote hardware resources, ... both in memory and in computation capacities . It can therefore be considered that the detection and monitoring processing carried out by the additional reference monitoring device 14Mstr are optimal, or at least of higher quality and resource levels, in comparison with the n monitoring devices 14! .. ., 14 ,, ..., 14n. This is the reason why the results provided by this additional reference monitoring device 14Mstr can be considered as constituting a reference, without target detection or tracking error, to which the results provided by the n monitoring devices can be compared. followed 14i, ..., 14 ,, ..., 14n, according to the first aspect of the present invention.

Le système adaptatif de suivi automatique de cible de la figure 1 comporte en outre un calculateur de métriques 20 matériellement conçu ou logiciellement programmé pour le calcul d’au moins une valeur métrique de performance de chacun des dispositifs de suivi 14u ..., 14,,14n.The adaptive automatic target tracking system of FIG. 1 further comprises a metric calculator 20 materially designed or software programmed for the calculation of at least one performance metric value of each of the tracking devices 14u ..., 14, , 14n.

Selon le premier aspect de la présente invention le calculateur de métriques 20 comporte un premier module matériel ou logiciel 22 plus précisément conçu pour calculer une première valeur métrique de performance à partir d’une comparaison, sur chacune des n portions Pu ..., P,, Pn de flux vidéo, de résultats de suivi de cible(s) Ri, ..., R,, ..., Rn respectivement fournis par les dispositifs de suivi 141( ..., 14,, ..., 14n sur les n portions Pu ..., P,, ..., Pn et de résultats de suivi de cible(s) S1; ..., Si, ..., Sn successivement fournis par le dispositif de suivi supplémentaire de référence 14Mstr sur ces mêmes n portions Pu ..., P,, ..., Pn. La première valeur métrique de performance peut être exprimée sous la forme d’un ratio et être corrélée à un nombre de cibles interchangées ou à un nombre de cibles non identifiées par chacun des n dispositifs de suivi 14^ ..., 14,, ..., 14n lorsqu’on les compare au dispositif de suivi supplémentaire de référence 14Mstr-According to the first aspect of the present invention, the metric calculator 20 comprises a first hardware or software module 22 more precisely designed to calculate a first performance metric value from a comparison, on each of the n portions Pu ..., P ,, Pn of video stream, of tracking results of target (s) Ri, ..., R ,, ..., Rn respectively provided by the tracking devices 141 (..., 14 ,, ..., 14n on the n portions Pu ..., P ,, ..., Pn and of results of monitoring of target (s) S1; ..., Si, ..., Sn successively supplied by the additional monitoring device of reference 14Mstr on these same n portions Pu ..., P ,, ..., Pn. The first performance metric value can be expressed in the form of a ratio and be correlated to a number of interchanged targets or to a number of targets not identified by each of the n monitoring devices 14 ^ ..., 14 ,, ..., 14n when compared to the additional monitoring device of ref ence 14Mstr-

Selon le deuxième aspect de la présente invention le calculateur de métriques 20 comporte un deuxième module matériel ou logiciel 24 plus précisément conçu pour calculer au moins une deuxième valeur métrique de performance à partir de chacune des valeurs représentatives de sollicitation de ressources matérielles fournies par les n dispositifs de mesure 18i, ..., 18,, 18n. Conformément aux mesures données en exemple précédemment, il peut ainsi s’agir d’une fraction de fréquence de fonctionnement maximale des unités matérielles CPU et GPU sollicitées, d’un taux d’utilisation d’espace mémoire alloué, d’une fraction de débit d’entrée ou de sortie maximal de données, d’une métrique de résultat obtenu par rapport à un objectif fixé en termes de nombre d’images traitées ou exploitées par seconde, d’un taux d’utilisation des coeurs de calculs utilisés dans les unités matérielles CPU et GPU sollicitées par rapport à un nombre maximal alloué, pour chacun des n dispositifs de suivi 14^ ..., 14,,..., 14n.According to the second aspect of the present invention, the metric calculator 20 comprises a second hardware or software module 24 more precisely designed to calculate at least one second performance metric value from each of the representative values of solicitation of material resources provided by the n measuring devices 18i, ..., 18 ,, 18n. In accordance with the measures given in the example above, it can thus be a fraction of the maximum operating frequency of the CPU and GPU hardware units used, a rate of use of allocated memory space, a fraction of throughput maximum input or output of data, a result metric obtained in relation to a target set in terms of the number of images processed or used per second, a rate of use of the calculation cores used in the CPU and GPU hardware units requested in relation to a maximum allocated number, for each of the n tracking devices 14 ^ ..., 14 ,, ..., 14n.

Le système adaptatif de suivi automatique de cible de la figure 1 comporte en outre un correcteur 26 matériellement conçu ou logiciellement programmé pour recalculer les paramètres de configuration des n dispositifs de suivi 141; ..., 14,, ..., 14n à partir des valeurs métriques fournies par le calculateur de métriques 20. En pratique, ce correcteur 26 peut disposer de fonctions ou systèmes d’équations linéaires ou non linéaires préétablis, d’un moteur de règles, d’un système expert, d’un système à réseaux neuronaux, de comparateurs, ou de tout autre outil d’intelligence artificielle utile à la mise à jour des paramètres de configuration de chacun des n dispositifs de suivi 14,,..., 14,,..., 14n. Il peut en particulier disposer d’un ensemble de règles ou lois qui doivent être observées, telles qu’une loi selon laquelle chaque dispositif de suivi 14,, ..., 14,, ..., 14n doit traiter au moins cinq images par secondes, ou qu’une loi selon laquelle chaque dispositif de suivi 14,, ..., 14,, ..., 14n ne doit pas échouer à détecter plus de 30% des cibles.The adaptive automatic target tracking system of FIG. 1 further comprises a corrector 26 materially designed or software programmed to recalculate the configuration parameters of the n tracking devices 141; ..., 14 ,, ..., 14n from the metric values provided by the metric calculator 20. In practice, this corrector 26 can have functions or systems of pre-established linear or non-linear equations, of a motor rules, an expert system, a neural network system, comparators, or any other artificial intelligence tool useful for updating the configuration parameters of each of the n monitoring devices 14 ,,. .., 14 ,, ..., 14n. It may in particular have a set of rules or laws which must be observed, such as a law according to which each tracking device 14 ,, ..., 14 ,, ..., 14n must process at least five images. per second, or that a law according to which each monitoring device 14 ,, ..., 14 ,, ..., 14n must not fail to detect more than 30% of the targets.

Il peut avoir une approche individuelle, en s’attachant au réglage individuel de chacun des n dispositifs de suivi 14,, ..., 14,, ..., 14n, mais également une approche globale, en s’attachant à répartir équitablement les ressources matérielles globalement disponibles en fonction des besoins différents de chacun. Il fournit ses résultats aux n configurateurs dynamiques 16,,..., 16,,..., 16n.It can have an individual approach, focusing on the individual adjustment of each of the n monitoring devices 14 ,, ..., 14 ,, ..., 14n, but also a global approach, focusing on distributing equitably the material resources generally available according to the different needs of each. It provides its results to the n dynamic configurators 16 ,, ..., 16 ,, ..., 16n.

Le dispositif de suivi supplémentaire de référence 14MSTr, le calculateur de métriques 20 et le correcteur 26 forment une plateforme matérielle ou logicielle d’optimisation 28 du système de la figure 1.The additional reference tracking device 14MSTr, the metric calculator 20 and the corrector 26 form a hardware or software optimization platform 28 of the system of FIG. 1.

Les n résultats des n dispositifs de suivi 14i, ..., 14,, ..., 14n sont fournis à un étage secondaire 30 du système adaptatif de suivi automatique de cible de la figure 1. Dans un mode de réalisation simple, cet étage secondaire 30 peut être un étage de sortie du système, mais il peut également s’agir d’un étage secondaire de traitement supplémentaire des flux vidéo.The n results of the n tracking devices 14i, ..., 14 ,, ..., 14n are supplied to a secondary stage 30 of the adaptive automatic target tracking system of FIG. 1. In a simple embodiment, this secondary stage 30 can be a system output stage, but it can also be a secondary stage for additional processing of the video streams.

Le fonctionnement du système détaillé précédemment va maintenant être décrit en référence à la figure 2.The operation of the system detailed previously will now be described with reference to FIG. 2.

Au cours d’une première étape 100, le collecteur 12 transmet les n flux vidéo fournis par les n caméras vidéo 10i, ..., 10,, ..., 10n aux n dispositifs de suivi 14,, ..., 14j, ..., 14n de l’étage primaire du système pour analyse. Au cours de cette même étape, le collecteur 12 transmet les n portions P,, ..., Pi, ..., Pn de flux vidéo successives au dispositif de suivi supplémentaire de référence 14MSTr pour analyse également.During a first step 100, the collector 12 transmits the n video streams supplied by the n video cameras 10i, ..., 10 ,, ..., 10n to the n monitoring devices 14 ,, ..., 14j , ..., 14n of the primary stage of the system for analysis. During this same step, the collector 12 transmits the n portions P ,, ..., Pi, ..., Pn of successive video streams to the additional reference tracking device 14MSTr for analysis also.

Au cours d’une étape suivante 102, chacun des n dispositifs de suivi 14,, ..., 14,, ..., 14n prend connaissance de sa configuration courante à l’aide de son configurateur dynamique 16i, ..., 16,,..., 16n, analyse le flux vidéo qui lui est transmis et fournit ses résultats à l’étage secondaire 30. Il fournit également ses résultats partiels Ri, ..., R,, ..., Rn obtenus sur les portions Pi, ..., P,, ..., Pn de flux vidéo au premier module 22 du calculateur de métriques 20.During a following step 102, each of the n monitoring devices 14 ,, ..., 14 ,, ..., 14n becomes aware of its current configuration using its dynamic configurator 16i, ..., 16 ,, ..., 16n, analyzes the video stream transmitted to it and provides its results on the secondary stage 30. It also provides its partial results Ri, ..., R ,, ..., Rn obtained on the portions Pi, ..., P ,, ..., Pn of video stream to the first module 22 of the metric calculator 20.

Au cours d’une étape 104 exécutée parallèlement à l’étape 102, le dispositif de suivi supplémentaire de référence 14Mstr analyse les n portions Pi,P,,Pn de flux vidéo successives qui lui sont transmises et fournit ses résultats Si, S,, Sn au premier module 22 du calculateur de métriques 20.During a step 104 executed in parallel with step 102, the additional reference tracking device 14Mstr analyzes the n portions Pi, P ,, Pn of successive video streams which are transmitted to it and provides its results Si, S ,, Sn at the first module 22 of the metric calculator 20.

Suite aux étapes 102 et 104, le premier module 22 du calculateur de métriques 20 calcule ses valeurs métriques précitées et les fournit au correcteur 26 au cours d’une étape 106.Following steps 102 and 104, the first module 22 of the metric calculator 20 calculates its aforementioned metric values and supplies them to the corrector 26 during a step 106.

Au cours d’une étape 108 exécutée parallèlement aux étapes 102 et 104, chacun des n dispositifs de mesure 18^ ..., 18,, ..., 18n fournit ses valeurs mesurées au deuxième module 24 du calculateur de métriques 20.During a step 108 executed in parallel with steps 102 and 104, each of the n measurement devices 18 ^ ..., 18 ,, ..., 18n supplies its measured values to the second module 24 of the metric calculator 20.

Suite à l’étape 108, le deuxième module 24 du calculateur de métriques 20 calcule ses valeurs métriques précitées et les fournit au correcteur 26 au cours d’une étape 110.Following step 108, the second module 24 of the metric calculator 20 calculates its aforementioned metric values and supplies them to the corrector 26 during a step 110.

Suite aux étapes 106 et 110, le correcteur 26 met à jour les paramètres de configuration des n dispositifs de suivi 14^ ..., 14,, ..., 14n comme indiqué précédemment au cours d’une étape 112. Il transmet les valeurs mises à jour aux configurateurs dynamiques 16i,..., 16,,..., 16n.Following steps 106 and 110, the corrector 26 updates the configuration parameters of the n monitoring devices 14 ^ ..., 14 ,, ..., 14n as indicated previously during a step 112. It transmits the updated values in dynamic configurators 16i, ..., 16 ,, ..., 16n.

Au cours d’une dernière étape 114, chaque configurateur dynamique 16i, ..., 16i, ..., 16n agit respectivement sur chaque dispositif de suivi 14i, ..., 14,, ..., 14n comme indiqué précédemment.During a last step 114, each dynamic configurator 16i, ..., 16i, ..., 16n acts respectively on each tracking device 14i, ..., 14 ,, ..., 14n as indicated above.

Les étapes 100 à 114 s’exécutent avantageusement en continu, pendant toute la durée de fonctionnement du système.Steps 100 to 114 are advantageously carried out continuously, during the entire operating time of the system.

Un premier exemple d’implémentation simple du système de la figure 1 est illustré sur la figure 3. Cette architecture présente des composants dont la maîtrise et le coût rendent l’implémentation aisée.A first example of a simple implementation of the system in FIG. 1 is illustrated in FIG. 3. This architecture has components whose control and cost make implementation easy.

Un serveur de suivi 40 formant, par exemple un ordinateur classique avec un système d’exploitation tel que Linux (marque déposée) et une carte d’accès à un réseau, comporte un ensemble 42 de dispositifs de suivi mutualisés. Cet ensemble 42 reçoit les flux vidéo des n caméras vidéo 10i,..., 10,,..., 10n qui peuvent prendre la forme de caméras IP (de l’anglais « Internet Protocol ») ou conformes au protocole Wi-Fi standard transmettant leurs flux vidéo par le réseau. Les dispositifs de suivi sont tout simplement des composants logiciels capables d’exécuter plusieurs algorithmes de détection et suivi de cible(s), par exemple implémentés en langage de programmation C++ ou Python (marque déposée) avec l’aide de la bibliothèque logicielle OpenCV (marque déposée).A tracking server 40 forming, for example a conventional computer with an operating system such as Linux (registered trademark) and a network access card, comprises a set 42 of shared monitoring devices. This assembly 42 receives the video streams from the n video cameras 10i, ..., 10 ,, ..., 10n which can take the form of IP cameras (from the English "Internet Protocol") or conform to the Wi-Fi protocol standard transmitting their video streams over the network. Tracking devices are quite simply software components capable of executing several algorithms for detecting and tracking target (s), for example implemented in C ++ or Python (registered trademark) programming language with the help of the OpenCV software library ( trademark).

La plateforme d’optimisation 28 est également implémentée dans un ordinateur classique avec accès au réseau. Le dispositif de suivi supplémentaire de référence 14Mstr, le calculateur de métriques 20 et le correcteur 26 qui la constituent sont eux aussi des composants logiciels par exemple implémentés en langage de programmation C++ ou Python (marque déposée) avec l’aide de la bibliothèque logicielle OpenCV (marque déposée). En particulier, le calculateur de métriques 20 et le correcteur 26 peuvent être programmés selon des algorithmes de l’état de la technique pour le calcul des métriques et des corrections basées des équations simples éprouvées sur des données de test pour la régulation. Dans cet exemple également, le dispositif de suivi supplémentaire de référence 14MSTr reçoit les portions de flux vidéo de l’ensemble 42 de dispositifs de suivi mutualisés.The optimization platform 28 is also implemented in a conventional computer with network access. The additional reference monitoring device 14Mstr, the metric calculator 20 and the corrector 26 which constitute it are also software components for example implemented in C ++ or Python (registered trademark) programming language with the help of the OpenCV software library. (trademark). In particular, the metric calculator 20 and the corrector 26 can be programmed according to state-of-the-art algorithms for calculating metrics and corrections based on simple equations tested on test data for regulation. In this example also, the additional reference monitoring device 14MSTr receives the video stream portions of the set 42 of shared monitoring devices.

Un deuxième exemple d’implémentation plus complexe mais plus souple du système de la figure 1 est illustré sur la figure 4. Cette architecture permet une mutualisation et un découplage de tous ses composants, de manière à envisager une implémentation industrielle ayant la capacité de traiter un nombre de caméras vidéo très important. En particulier, l’effet d’échelle dans ce type d’architecture permet de produire une amélioration considérable du rendement du système en bénéficiant de la multiplication des gains par caméras vidéo et de l’utilisation d’unité de calculs peu chères et mutualisées pour l’optimisation par calculs de métriques et corrections.A second example of a more complex but more flexible implementation of the system of FIG. 1 is illustrated in FIG. 4. This architecture allows pooling and decoupling of all of its components, so as to envisage an industrial implementation having the capacity to process a very large number of video cameras. In particular, the scale effect in this type of architecture makes it possible to produce a considerable improvement in system performance by benefiting from the multiplication of gains by video cameras and the use of inexpensive and shared calculation units for optimization by metric calculations and corrections.

Un premier composant 50, remplissant une fonction de répartiteur et bus de communication, reçoit les flux vidéo des n caméras vidéo 10i, ..., 10,, ..., 10n. Il peut s’agir d’un composant de type agent de message (de l’anglais « message broker ») tel que Apache ActiveMQ (marque déposée) ou WebSphere (marque déposée), ou encore un bus d’entreprise ESB (de l’anglais « Entreprise Service Bus ») tel que Blueway (marque déposée) ou Talend (marque déposée).A first component 50, fulfilling a function of distributor and communication bus, receives the video streams from the n video cameras 10i, ..., 10 ,, ..., 10n. It can be a message agent component (from the English "message broker") such as Apache ActiveMQ (registered trademark) or WebSphere (registered trademark), or an ESB company bus (from the 'Business Service Bus') such as Blueway (registered trademark) or Talend (registered trademark).

Un deuxième composant 52, connecté au premier composant 50, présente une architecture évolutive de type infrastructure à la demande laaS (de l’anglais « Infrastructure as a Service »), permettant de s’adapter à la demande en ressources par allocation dynamique d’unités de calcul telles que des machines virtuelles. Ce deuxième composant 52 peut être implémenté en laaS privé à base de composants VMware (marque déposée) ou en laaS publique à base de services tels qu’Amazon EC2 (marque déposée). Il comporte un module de suivi 54 à M dispositifs de suivi 54u ..., 54m, un module de suivi de référence 56 à N dispositifs de suivi supplémentaires de référence 56i, ..., 56N et un module de régulation 58 à P régulateurs 58ι, 58P comportant chacun un calculateur de métriques et un correcteur. Ces trois modules 54, 56 et 58 sont déployés sur machine virtuelle.A second component 52, connected to the first component 50, has a scalable architecture of the laaS demand infrastructure type (from the English “Infrastructure as a Service”), making it possible to adapt to the demand for resources by dynamic allocation of computing units such as virtual machines. This second component 52 can be implemented in private laaS based on VMware components (registered trademark) or in public laaS based on services such as Amazon EC2 (registered trademark). It includes a monitoring module 54 to M monitoring devices 54u ..., 54m, a reference monitoring module 56 to N additional reference monitoring devices 56i, ..., 56N and a regulation module 58 to P regulators 58ι, 58P each comprising a metric calculator and a corrector. These three modules 54, 56 and 58 are deployed on a virtual machine.

Les échanges de données entre les premier et deuxième composants 50 et 52 se font de la façon suivante : - transmission des flux vidéo et des paramètres de configuration corrigés, du premier composant 50 vers le module de suivi 54 du deuxième composant 52, - transmission des résultats de suivi vidéo, du module de suivi 54 du deuxième composant 52 vers le premier composant 50, - transmission des portions de flux vidéo sélectionnées, du premier composant 50 vers le module de suivi de référence 56 du deuxième composant 52, - transmission des résultats de suivi de référence sur les portions de flux vidéo sélectionnées, du module de suivi de référence 56 du deuxième composant 52 vers le premier composant 50, - transmission des résultats de suivi vidéo et des résultats de suivi de référence, du premier composant 50 vers le module de régulation 58 du deuxième composant 52, - échange des valeurs métriques entre régulateurs du module de régulation 58 du deuxième composant 52 en passant par le premier composant 50, - transmission des paramètres de configuration corrigés, du module de régulation 58 du deuxième composant 52 vers le premier composant 50, - transmission des résultats de suivi vidéo, du premier composant 50 vers un étage secondaire ou de sortie.Data exchanges between the first and second components 50 and 52 are carried out as follows: - transmission of video streams and corrected configuration parameters, from the first component 50 to the tracking module 54 of the second component 52, - transmission of video tracking results, from the tracking module 54 of the second component 52 to the first component 50, - transmission of the selected video stream portions, from the first component 50 to the reference tracking module 56 of the second component 52, - transmission of the results of reference tracking on the selected video stream portions, of the reference tracking module 56 of the second component 52 to the first component 50, - transmission of the video tracking results and of the reference tracking results, from the first component 50 to the regulation module 58 of the second component 52, - exchange of metric values between regulators of regulation module 58 of the two ith component 52 passing through the first component 50, - transmission of the corrected configuration parameters, from the regulation module 58 of the second component 52 to the first component 50, - transmission of the video monitoring results, from the first component 50 to a secondary stage or out.

La répartition des tâches à l’intérieur de chacun des modules 54, 56 et 58 se fait de façon découplée selon la disponibilité et les ressources de leurs composants 54!, ..., 54m, 56!, ..., 56n et 58i, ..., 58P.The distribution of tasks within each of modules 54, 56 and 58 is decoupled according to the availability and resources of their components 54 !, ..., 54m, 56 !, ..., 56n and 58i , ..., 58P.

Comme déjà évoqué, les systèmes illustrés sur les figures 1, 3 et 4 peuvent être mis en œuvre dans des dispositifs informatiques tels que des ordinateurs classiques comportant des processeurs associés à des mémoires pour le stockage de fichiers de données et de programmes d’ordinateurs. Les dispositifs de suivi et de régulation (par calcul de métrique, correction et configuration) peuvent être implémentés dans ces ordinateurs sous la forme de programmes d’ordinateurs ou de différentes fonctions d’un même programme d’ordinateur. Ces fonctions pourraient aussi être au moins en partie micro programmées ou micro câblées dans des circuits intégrés dédiés. Ainsi, en variante, les dispositifs informatiques mettant en œuvre les figures 1,3 et 4 pourraient être remplacés par des dispositifs électroniques composés uniquement de circuits numériques (sans programme d’ordinateur) pour la réalisation des mêmes actions.As already mentioned, the systems illustrated in FIGS. 1, 3 and 4 can be implemented in computer devices such as conventional computers comprising processors associated with memories for storing data files and computer programs. The monitoring and regulation devices (by metric calculation, correction and configuration) can be implemented in these computers in the form of computer programs or of different functions of the same computer program. These functions could also be at least partly micro programmed or micro wired in dedicated integrated circuits. Thus, as a variant, the computer devices implementing Figures 1, 3 and 4 could be replaced by electronic devices composed solely of digital circuits (without a computer program) for carrying out the same actions.

Il apparaît clairement qu’un système adaptatif de suivi automatique de cible dans au moins un flux vidéo tel que l’un de ceux décrits précédemment permet de réellement optimiser automatiquement ses traitements dans la limite de ses ressources et de détecter les situations à risque de façon nettement plus fiable. L’optimisation des ressources matérielles qui en résulte compense largement le surcoût engendré par l’ajout du ou des dispositif(s) de suivi de référence et des dispositifs de mesure de sollicitation des ressources matérielles.It clearly appears that an adaptive automatic target tracking system in at least one video stream such as one of those described above makes it possible to really optimize its processing automatically within the limits of its resources and to detect risk situations in a way significantly more reliable. The resulting optimization of material resources largely offsets the additional cost generated by the addition of the reference monitoring device (s) and measurement devices for the solicitation of material resources.

Il devient en particulier possible de minimiser le taux d’occupation du matériel pour le système global incluant l’ensemble des dispositifs de suivi et de maximiser la qualité du suivi pour chacun d’eux : en effet la chaîne de régulation par calculs de métriques et corrections est avantageusement mise en œuvre régulièrement, par exemple périodiquement, pour chacun des dispositifs de suivi de l’étage primaire et permet d’en corriger le fonctionnement régulièrement suivant des objectifs fixés au système.In particular, it becomes possible to minimize the occupancy rate of the equipment for the overall system including all of the monitoring devices and to maximize the quality of monitoring for each of them: in fact the chain of regulation by metric calculations and Corrections is advantageously implemented regularly, for example periodically, for each of the monitoring devices of the primary stage and makes it possible to correct their operation regularly according to objectives set in the system.

Le ou les dispositifs de suivi supplémentaires de référence n’est ou ne sont pas soumis à des contraintes de traitement en temps réel parce que la fréquence et la latence des boucles de régulation peuvent varier sans détérioration brusque des performances du système. Ainsi le chaque dispositif de suivi supplémentaire de référence peut être déployé sur des composants physiques partagés avec d’autres fonctionnalités du système, dans une architecture généralement moins onéreuse, ramenée au coût total par opération unitaire, que les architectures orientées temps réel.The reference reference tracking device (s) is or is not subject to real-time processing constraints because the frequency and latency of the control loops can vary without sudden deterioration in system performance. Thus, each additional reference monitoring device can be deployed on physical components shared with other system functionalities, in an architecture generally less expensive, reduced to the total cost per unit operation, than real-time oriented architectures.

Le coût global du système est fonction de la complexité des scènes, et de la qualité demandée aux dispositifs de suivi. Pour une qualité de suivi fixée le raisonnement suivant montre que la présente invention diminue la dépense du système. Un raisonnement analogue peut être mené selon lequel, pour une dépense donnée, la présente invention, améliore la qualité du suivi.The overall cost of the system depends on the complexity of the scenes, and the quality demanded of the monitoring devices. For a fixed monitoring quality, the following reasoning shows that the present invention reduces the expenditure of the system. A similar reasoning can be carried out according to which, for a given expense, the present invention improves the quality of monitoring.

Notons : - ctreguiation-pour-i la quantité de ressources matérielles utilisées pour la régulation (calculs de métriques et correction) du dispositif de suivi 14,,Let us note: - ctreguiation-pour-i the quantity of material resources used for the regulation (calculation of metrics and correction) of the monitoring device 14 ,,

Ctsuivi-tracker-maitre-i > C^caclul-des-métriques-i > C^œrrecteur-i la C|U3ntité de ressources matérielles utilisées pour l’évaluation par le dispositif de suivi supplémentaire de référence 14Mstr des portions de flux vidéo de la caméra 10,, de l’évaluation de consommation en ressource du dispositif de suivi 14,, du calcul de correction à appliquer au dispositif de suivi 14„ - ctunitaire-tracker-moy la quantité de ressources matérielles moyenne demandées par un dispositif de suivi (moyenne calculée sur l’ensemble des dispositifs de suivi 14! à 14n), ctunitaire-tracker-maitre-moy la quantité de ressources matérielles demandées pour l’évaluation par le dispositif de suivi supplémentaire de référence 14Mstr des portions de flux vidéo d’une caméra en moyenne sur une période et sur l’ensemble des dispositifs de suivi, ctunitaire—tracker—moy—optimisé la quantité de ressources matérielles moyenne demandées par un dispositif de suivi lorsque la régulation décrite précédemment est utilisée (moyenne calculée sur l’ensemble des dispositifs de suivi 14! à 14n).Ctsuivi-tracker-master-i> C ^ caclul-des-métriques-i> C ^ œrrecteur-i la C | U3ntity of material resources used for the evaluation by the additional reference monitoring device 14Mstr of the video stream portions of the camera 10 ,, of the resource consumption assessment of the monitoring device 14 ,, of the correction calculation to be applied to the monitoring device 14 „- ctunitaire-tracker-moy the average quantity of material resources requested by a monitoring device (average calculated over all the monitoring devices 14! to 14n), ctunitaire-tracker-maitre-moy the quantity of material resources requested for the evaluation by the additional reference monitoring device 14Mstr of the video stream portions of an average camera over a period and across all tracking devices, unit — tracker — avg — optimized the average amount of material resources required by a tracking device when the regulation described above is used (average calculated on all the monitoring devices 14! at 14n).

Lorsque le système bénéficie des premier et deuxième aspects de la présente invention :When the system benefits from the first and second aspects of the present invention:

etand

Pour une implémentation simple de la régulation :For a simple implementation of the regulation:

Lorsque le système ne bénéficie pas des premier et deuxième aspects de la présente invention :When the system does not benefit from the first and second aspects of the present invention:

D’où un gain G :Hence a gain G:

La présente invention apporte donc un gain de performance lorsque l’optimisation moyenne pour un dispositif de suivi apportée par la régulation est supérieure aux dépenses moyennes induites par le dispositif de suivi supplémentaire de référence pour un dispositif de suivi :The present invention therefore provides a performance gain when the average optimization for a monitoring device provided by the regulation is greater than the average expenditure induced by the additional reference monitoring device for a monitoring device:

On notera par ailleurs que l’invention n’est pas limitée aux modes de réalisation décrits précédemment.Note also that the invention is not limited to the embodiments described above.

En particulier, les modes de réalisation décrits précédemment combinent les avantages des premier et deuxième aspects de la présente invention. Mais il convient de noter que ces deux aspects sont indépendants l’un de l’autre. Un système selon le premier aspect de la présente invention pourrait ne pas comporter les dispositifs de mesure et les calculs de deuxièmes valeurs métriques. Un système selon le deuxième aspect de la présente invention pourrait ne pas comporter le ou les dispositifs de suivi supplémentaires de référence et les calculs de premières valeurs métriques.In particular, the embodiments described above combine the advantages of the first and second aspects of the present invention. But it should be noted that these two aspects are independent of each other. A system according to the first aspect of the present invention may not include the measurement devices and the calculations of second metric values. A system according to the second aspect of the present invention may not include the additional reference tracking device (s) and the calculations of first metric values.

Il apparaîtra plus généralement à l'homme de l'art que diverses modifications peuvent être apportées aux modes de réalisation décrits ci-dessus, à la lumière de l'enseignement qui vient de lui être divulgué. Dans la présentation détaillée de l’invention qui est faite précédemment, les termes utilisés ne doivent pas être interprétés comme limitant l’invention aux modes de réalisation exposés dans la présente description, mais doivent être interprétés pour y inclure tous les équivalents dont la prévision est à la portée de l'homme de l'art en appliquant ses connaissances générales à la mise en œuvre de l'enseignement qui vient de lui être divulgué.It will more generally appear to those skilled in the art that various modifications can be made to the embodiments described above, in the light of the teaching which has just been disclosed to him. In the detailed presentation of the invention which has been made previously, the terms used should not be interpreted as limiting the invention to the embodiments set out in this description, but must be interpreted to include all the equivalents the prediction of which is within the reach of the skilled person by applying his general knowledge to the implementation of the teaching which has just been disclosed to him.

Claims (4)

REVENDICATIONS 1. Système adaptatif de suivi automatique de cible dans au moins un flux vidéo, comportant : au moins un dispositif de suivi (14i, 14n), recevant ledit au moins un flux vidéo et configurable dynamiquement, conçu pour la détection et le suivi automatique d’au moins une cible par analyse dudit au moins un flux vidéo, un calculateur (20) d’au moins une valeur métrique de performance à partir d’un résultat de suivi de cible (Ri, ..., Rn) fourni par ledit au moins un dispositif de suivi (14i, ..., 14n), un correcteur (26) d’au moins un paramètre de configuration dudit au moins un dispositif de suivi (14i, ..., 14n) en fonction de ladite au moins une valeur métrique de performance, et au moins un configurateur dynamique (16i,..., 16n) dudit au moins un dispositif de suivi (14i, ..., 14n) par application dudit au moins un paramètre de configuration corrigé, caractérisé en ce qu’il comporte en outre au moins un dispositif de suivi supplémentaire de référence (14Mstr), recevant au moins une portion (Pi, ..., Pn) dudit au moins un flux vidéo, et en ce que le calculateur (20) est plus précisément conçu pour calculer ladite au moins une valeur métrique de performance à partir d’une comparaison, sur ladite au moins une portion de flux vidéo, du résultat de suivi de cible (R-i, ..., Rn) fourni par ledit au moins un dispositif de suivi (14!, ..., 14n) et d’un résultat de suivi de référence (Si,..., Sn) fourni par ledit au moins un dispositif de suivi supplémentaire de référence (14MStr)·1. Adaptive automatic target tracking system in at least one video stream, comprising: at least one tracking device (14i, 14n), receiving said at least one dynamically configurable video stream, designed for automatic detection and tracking of '' at least one target by analysis of said at least one video stream, a calculator (20) of at least one performance metric value from a target tracking result (Ri, ..., Rn) provided by said at least one monitoring device (14i, ..., 14n), a corrector (26) of at least one configuration parameter of said at least one monitoring device (14i, ..., 14n) as a function of said at at least one performance metric value, and at least one dynamic configurator (16i, ..., 16n) of said at least one monitoring device (14i, ..., 14n) by application of said at least one corrected configuration parameter, characterized in that it further comprises at least one additional reference monitoring device (14Mstr ), receiving at least a portion (Pi, ..., Pn) of said at least one video stream, and in that the computer (20) is more precisely designed to calculate said at least one performance metric value from a comparison, on said at least one portion of video stream, of the target tracking result (Ri, ..., Rn) provided by said at least one tracking device (14 !, ..., 14n) and of a reference monitoring result (Si, ..., Sn) supplied by said at least one additional reference monitoring device (14MStr) · 2. Système adaptatif de suivi automatique de cible selon la revendication 1, comportant en outre au moins un dispositif de capture vidéo (10i, ..., 10n), relié en transmission de données audit au moins un dispositif de suivi (14!,..., 14n) et audit au moins un dispositif de suivi supplémentaire de référence (14MSTr), pour la fourniture respective dudit au moins un flux vidéo et de ladite au moins une portion (Pi, ..., Pn) dudit au moins un flux vidéo.2. Adaptive automatic target tracking system according to claim 1, further comprising at least one video capture device (10i, ..., 10n), connected in data transmission to said at least one tracking device (14! ..., 14n) and to said at least one additional reference tracking device (14MSTr), for the respective supply of said at least one video stream and of said at least one portion (Pi, ..., Pn) of said at least a video stream. 3. Procédé adaptatif de suivi automatique de cible dans au moins un flux vidéo, comportant les étapes suivantes : analyse (102) dudit au moins un flux vidéo, à l’aide d’au moins un dispositif de suivi (14i, ..., 14n), configurable dynamiquement, conçu pour la détection et le suivi automatique d’au moins une cible dans ledit au moins un flux vidéo, calcul (106) d’au moins une valeur métrique de performance à partir d’un résultat de suivi de cible (Ri, Rn) fourni par ledit au moins un dispositif de suivi (14^ 14n), correction (112) d’au moins un paramètre de configuration dudit au moins un dispositif de suivi (14^ 14n) en fonction de ladite au moins une valeur métrique de performance, et configuration dynamique (114) dudit au moins un dispositif de suivi (14!, ..., 14n) par application dudit au moins un paramètre de configuration corrigé, caractérisé en ce qu’il comporte en outre la fourniture (100) d’au moins une portion (Pt, ..., Pn) dudit au moins un flux vidéo à au moins un dispositif de suivi supplémentaire de référence (14Mstr), et en ce que le calcul (106) de ladite au moins une valeur métrique de performance est plus précisément réalisé à partir d’une comparaison, sur ladite au moins une portion (Ρ1( ..., Pn) de flux vidéo, du résultat de suivi de cible (Ri,..., Rn) fourni par ledit au moins un dispositif de suivi (14i,..., 14n) et d’un résultat de suivi de référence (Si, ..., Sn) fourni par ledit au moins un dispositif de suivi supplémentaire de référence (14Mstr)·3. Adaptive automatic target tracking method in at least one video stream, comprising the following steps: analysis (102) of said at least one video stream, using at least one tracking device (14i, ... , 14n), dynamically configurable, designed for the automatic detection and monitoring of at least one target in said at least one video stream, calculation (106) of at least one performance metric value from a monitoring result target (Ri, Rn) provided by said at least one tracking device (14 ^ 14n), correction (112) of at least one configuration parameter of said at least one tracking device (14 ^ 14n) as a function of said at least one performance metric value, and dynamic configuration (114) of said at least one monitoring device (14 !, ..., 14n) by application of said at least one corrected configuration parameter, characterized in that it comprises in addition to the supply (100) of at least a portion (Pt, ..., Pn) of said at least one video stream to at least one additional reference tracking device (14Mstr), and in that the calculation (106) of said at least one performance metric value is more precisely carried out from a comparison, on said at least one portion (Ρ1 (..., Pn) of video stream, of the target tracking result (Ri, ..., Rn) provided by said at least one tracking device (14i, ..., 14n) and of a reference monitoring result (Si, ..., Sn) supplied by said at least one additional reference monitoring device (14Mstr) · 4. Programme d’ordinateur téléchargeable depuis un réseau de communication et/ou enregistré sur un support lisible par ordinateur et/ou exécutable par un processeur, caractérisé en ce qu’il comprend des instructions pour l’exécution des étapes d’un procédé adaptatif de suivi automatique de cible dans au moins un flux vidéo selon la revendication 3, lorsque ledit programme est exécuté sur un ordinateur.4. Computer program downloadable from a communication network and / or recorded on a medium readable by computer and / or executable by a processor, characterized in that it comprises instructions for the execution of the steps of an adaptive method automatic target tracking in at least one video stream according to claim 3, when said program is executed on a computer.
FR1763231A 2017-12-26 2017-12-26 ADAPTIVE SYSTEM AND METHOD FOR AUTOMATICALLY TRACKING AT LEAST ONE TARGET IN AT LEAST ONE VIDEO STREAM Pending FR3076039A1 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
FR1763231A FR3076039A1 (en) 2017-12-26 2017-12-26 ADAPTIVE SYSTEM AND METHOD FOR AUTOMATICALLY TRACKING AT LEAST ONE TARGET IN AT LEAST ONE VIDEO STREAM
FR1850437A FR3076042B1 (en) 2017-12-26 2018-01-19 ADAPTIVE SYSTEM AND METHOD FOR AUTOMATIC MONITORING OF AT LEAST ONE TARGET IN AT LEAST ONE VIDEO STREAM
EP18212481.8A EP3506202B1 (en) 2017-12-26 2018-12-13 Adaptive system and method for automatically tracking at least one target in at least one video stream
US16/227,213 US11042995B2 (en) 2017-12-26 2018-12-20 Adaptive system and method for automatic tracking of at least one target in at least one video stream
CN201811599955.8A CN109961002A (en) 2017-12-26 2018-12-26 Automatically track the Adaptable System and method of the target in video flowing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
FR1763231A FR3076039A1 (en) 2017-12-26 2017-12-26 ADAPTIVE SYSTEM AND METHOD FOR AUTOMATICALLY TRACKING AT LEAST ONE TARGET IN AT LEAST ONE VIDEO STREAM

Publications (1)

Publication Number Publication Date
FR3076039A1 true FR3076039A1 (en) 2019-06-28

Family

ID=62167478

Family Applications (2)

Application Number Title Priority Date Filing Date
FR1763231A Pending FR3076039A1 (en) 2017-12-26 2017-12-26 ADAPTIVE SYSTEM AND METHOD FOR AUTOMATICALLY TRACKING AT LEAST ONE TARGET IN AT LEAST ONE VIDEO STREAM
FR1850437A Expired - Fee Related FR3076042B1 (en) 2017-12-26 2018-01-19 ADAPTIVE SYSTEM AND METHOD FOR AUTOMATIC MONITORING OF AT LEAST ONE TARGET IN AT LEAST ONE VIDEO STREAM

Family Applications After (1)

Application Number Title Priority Date Filing Date
FR1850437A Expired - Fee Related FR3076042B1 (en) 2017-12-26 2018-01-19 ADAPTIVE SYSTEM AND METHOD FOR AUTOMATIC MONITORING OF AT LEAST ONE TARGET IN AT LEAST ONE VIDEO STREAM

Country Status (2)

Country Link
CN (1) CN109961002A (en)
FR (2) FR3076039A1 (en)

Also Published As

Publication number Publication date
FR3076042A1 (en) 2019-06-28
CN109961002A (en) 2019-07-02
FR3076042B1 (en) 2021-11-05

Similar Documents

Publication Publication Date Title
US11769059B2 (en) Systems and methods for distributed training of deep learning models
EP3506201A1 (en) Adaptive system and method for automatically tracking at least one target in at least one video stream
US11422517B2 (en) Automated transfer of items between compartments of a smart appliance
CN110401796B (en) Jitter compensation method and device of image acquisition device
US11734801B2 (en) Distributed depth data processing
WO2015110762A1 (en) Method for determining the trajectory of a point of a moving object
EP2105760A1 (en) Method and system for tracking emitters
US20230134806A1 (en) Denoising depth image data using neural networks
EP3506202B1 (en) Adaptive system and method for automatically tracking at least one target in at least one video stream
FR3076039A1 (en) ADAPTIVE SYSTEM AND METHOD FOR AUTOMATICALLY TRACKING AT LEAST ONE TARGET IN AT LEAST ONE VIDEO STREAM
FR3076040A1 (en) ADAPTIVE SYSTEM AND METHOD FOR AUTOMATICALLY TRACKING AT LEAST ONE TARGET IN AT LEAST ONE VIDEO STREAM
FR3043486B1 (en) METHOD AND DEVICE FOR PROVIDING DATA FOR SATELLITE NAVIGATION-ASSISTED AUTOMATIC LANDING ON AN AIRCRAFT
CN109598344B (en) Model generation method and device
WO2007071342A1 (en) Systems and methods for quantitative application measurement
WO2019197781A1 (en) Predictive machine learning for predicting a future speed of a motor vehicle moving on a road
US20220012913A1 (en) Methods, systems, apparatus, and articles of manufacture for camera image stream selection for electronic user devices
EP4315170A1 (en) Multimodal autoencoder with improved latent data fusion
EP3051416A1 (en) Method for controlling the deployment of a program to be executed in a fleet of machines
EP3343375B1 (en) A method and a system for monitoring batch processing of applications executed in it infrastructure
CN111899239A (en) Image processing method and device
FR3063359B1 (en) METHOD FOR DETERMINING A TIME PERFORMANCE OF AN ELECTRONIC PROCESSING UNIT EXECUTING AN ALGORITHM
EP4102366B1 (en) Method and device for optimising the sensor resources of a multi-sensor system
EP3380947B1 (en) Method and device for forecasting cloudiness by statistical processing of data selected by spatial analysis
WO2017060590A1 (en) Method of optimizing decomposition of an asynchronous signal
US11288097B2 (en) Automated hardware resource optimization

Legal Events

Date Code Title Description
PLFP Fee payment

Year of fee payment: 2