FR3117715A1 - Automated video editing method and device, broadcasting device and monitoring system implementing same - Google Patents

Automated video editing method and device, broadcasting device and monitoring system implementing same Download PDF

Info

Publication number
FR3117715A1
FR3117715A1 FR2013259A FR2013259A FR3117715A1 FR 3117715 A1 FR3117715 A1 FR 3117715A1 FR 2013259 A FR2013259 A FR 2013259A FR 2013259 A FR2013259 A FR 2013259A FR 3117715 A1 FR3117715 A1 FR 3117715A1
Authority
FR
France
Prior art keywords
video
stream
video stream
captured
streams
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
FR2013259A
Other languages
French (fr)
Inventor
Nicolas Doisy
Corinne METILLON
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Orange SA
Original Assignee
Orange SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Orange SA filed Critical Orange SA
Priority to FR2013259A priority Critical patent/FR3117715A1/en
Publication of FR3117715A1 publication Critical patent/FR3117715A1/en
Withdrawn legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8549—Creating video summaries, e.g. movie trailer

Abstract

Procédé et dispositif de montage vidéo automatisé, Dispositif de diffusion et système de surveillance l’implémentant L'invention concerne le montage vidéo automatisé. En particulier, l’invention concerne le montage vidéo multi-caméra automatisé pour la diffusion ou la surveillance vidéo. Un objet de l’invention est un procédé de montage vidéo automatisé comportant une sélection à un instant donné d’un flux vidéo parmi plusieurs flux vidéo captés en fonction de données détectées à l’instant donné dans les contenus des flux vidéo captés, le flux vidéo sélectionné à un instant donné étant intégré à partir de l’instant donné dans le flux vidéo à reproduire. Ainsi, non seulement les erreurs de montage sont limitées mais il permet aussi un montage vidéo plus pertinent d’un grand nombre de flux vidéo captés. Figure pour l’abrégé : Figure 1Process and device for automated video editing, broadcasting device and monitoring system implementing it The invention relates to automated video editing. In particular, the invention relates to automated multi-camera video editing for broadcast or video surveillance. An object of the invention is an automated video editing method comprising a selection at a given instant of a video stream from among several captured video streams as a function of data detected at the given instant in the contents of the captured video streams, the stream video selected at a given instant being integrated from the given instant into the video stream to be reproduced. Thus, not only are editing errors limited, but it also allows more relevant video editing of a large number of captured video streams. Figure for abstract: Figure 1

Description

Procédé et dispositif de montage vidéo automatisé, Dispositif de diffusion et système de surveillance l’implémentantAutomated video editing method and device, broadcasting device and monitoring system implementing same

L'invention concerne le montage vidéo automatisé. En particulier, l’invention concerne le montage vidéo multi-caméra automatisé pour la diffusion ou la surveillance vidéo.The invention relates to automated video editing. In particular, the invention relates to automated multi-camera video editing for broadcast or video surveillance.

État de la techniqueState of the art

Auparavant, notamment lorsque les caméras étaient analogiques, le nombre de caméras utilisées pour filmer un évènement était limité. Alors, la consultation attentive des flux vidéo captés était possible par un seul opérateur humain. Eventuellement, cela nécessitait de la part de l’opérateur une expertise et une expérience à la réalisation de cette tâche.Previously, especially when the cameras were analog, the number of cameras used to film an event was limited. Then, the attentive consultation of the captured video streams was possible by a single human operator. Possibly, this required the operator to have expertise and experience in carrying out this task.

Ainsi, la consultation des flux vidéo pour la surveillance vidéo pas un opérateur humain était suffisante. Dans le cas de diffusion, le montage vidéo d’un évènement en cours pouvait aussi être réalisé par un opérateur humain qui avait à jongler avec seulement quelques flux vidéo captés.Thus, consultation of video streams for video surveillance by a human operator was sufficient. In the case of broadcasting, the video editing of an event in progress could also be carried out by a human operator who had to juggle with only a few captured video streams.

Aujourd’hui, avec l’arrivée du numérique, le nombre de caméras 2D, 3D, 360°, etc. couvrant un évènement public ou privé a explosé générant une grande quantité de flux vidéo de façon synchronisée.Today, with the arrival of digital technology, the number of 2D, 3D, 360° cameras, etc. covering a public or private event exploded generating a large amount of video streams in a synchronized fashion.

Si le but du montage reste le même à savoir de fournir la restitution la plus qualitative de l’évènement en cours en sélectionnant parmi les flux vidéo captés le flux le plus pertinent à un instant T, celui-ci s’est complexifié pour un simple opérateur humain.If the purpose of the editing remains the same, namely to provide the most qualitative restitution of the event in progress by selecting from among the video streams captured the most relevant stream at a time T, this has become more complex for a simple human operator.

En effet, un montage vidéo manuel risque de présenter des erreurs de pertinence du flux vidéo monté en raison des difficultés pour l’opérateur humain de maintenir une attention permanente sur l’ensemble des flux vidéo captés et l’impossibilité de tenir compte de la totalité des sous-évènements qui se déroulent dans chacun des flux vidéo captés de l’évènement principal. Ces erreurs de pertinence seront d’autant plus présentes si le montage vidéo est effectué en temps réel car l’opérateur rencontrera des difficultés d’arbitrage rapide entre deux sous-évènements simultanés importantsIndeed, manual video editing risks presenting errors of relevance of the edited video stream due to the difficulties for the human operator to maintain permanent attention on all the captured video streams and the impossibility of taking into account all sub-events that take place in each of the video streams captured from the main event. These relevance errors will be all the more present if the video editing is carried out in real time because the operator will encounter difficulties in quickly arbitrating between two significant simultaneous sub-events.

Un des buts de la présente invention est de remédier à des inconvénients/insuffisances de l'état de la technique/ d'apporter des améliorations par rapport à l'état de la technique.One of the aims of the present invention is to remedy the drawbacks/shortcomings of the state of the art/to make improvements with respect to the state of the art.

Un objet de l’invention est un procédé de montage vidéo automatisé comportant une sélection à un instant donné d’un flux vidéo parmi plusieurs flux vidéo captés en fonction de données détectées à l’instant donné dans les contenus des flux vidéo captés, le flux vidéo sélectionné à un instant donné étant intégré à partir de l’instant donné dans le flux vidéo à reproduire.An object of the invention is an automated video editing method comprising a selection at a given instant of a video stream from among several captured video streams as a function of data detected at the given instant in the contents of the captured video streams, the stream video selected at a given instant being integrated from the given instant into the video stream to be reproduced.

Ainsi, non seulement les erreurs de montage sont limitées mais il permet aussi un montage vidéo plus pertinent d’un grand nombre de flux vidéo captés.Thus, not only are editing errors limited, but it also allows more relevant video editing of a large number of captured video streams.

Avantageusement, le procédé de montage vidéo comporte une association d’une valeur de pondération à un instant donné d’au moins un flux vidéo captés en fonction de données détectées à l’instant donné dans les contenus des flux vidéo captés, la sélection est fonction des valeurs de pondération associée aux flux vidéo captés.Advantageously, the video editing method comprises an association of a weighting value at a given instant of at least one captured video stream as a function of data detected at the given instant in the contents of the captured video streams, the selection is a function weighting values associated with the captured video streams.

Ainsi, le montage vidéo est simplifié et moins lourds en terme de calculs.Thus, video editing is simplified and less heavy in terms of calculations.

Avantageusement, le procédé de montage vidéo comporte un arbitrage entre des flux vidéo captés présélectionnés en fonction d’une priorisation des données détectées par rapport au contexte d’utilisation, lorsque les flux vidéo captés présélectionnés sont associés à une même valeur de pondération à un instant donné, le flux vidéo arbitré constitue le flux vidéo sélectionné.Advantageously, the video editing method comprises an arbitration between preselected captured video streams according to a prioritization of the detected data with respect to the context of use, when the preselected captured video streams are associated with the same weighting value at a given time. given, the arbitrated video stream constitutes the selected video stream.

Ainsi, les erreurs de montages sont encore réduites.Thus, assembly errors are further reduced.

Avantageusement, le procédé de montage vidéo comporte une incrustation de deux flux vidéo captés présélectionnés l’un dans l’autre, lorsque les flux vidéo captés présélectionnés sont associés à une même valeur de pondération à un instant donné, le flux vidéo incrusté comportant les des flux vidéo captés présélectionnés constitue le flux vidéo sélectionné.Advantageously, the video editing method comprises an embedding of two preselected captured video streams one inside the other, when the preselected captured video streams are associated with the same weighting value at a given instant, the embedded video stream comprising the des pre-selected captured video streams is the selected video stream.

Ainsi, le flux vidéo à reproduire gagne en pertinence.Thus, the video stream to be reproduced gains in relevance.

Avantageusement, la sélection est aussi fonction de paramètre de contexte d’utilisation du flux vidéo à reproduire.Advantageously, the selection is also a function of the context of use parameter of the video stream to be reproduced.

Ainsi, le flux vidéo à reproduire est personnalisé.Thus, the video stream to be reproduced is personalized.

Avantageusement, le procédé de montage vidéo comporte un cadrage d’un flux vidéo capté en fonction de données détectées à l’instant donné dans le flux vidéo capté, le flux vidéo cadré est utilisé comme flux vidéo captés par la sélection.Advantageously, the video editing method comprises a framing of a captured video stream as a function of data detected at the given instant in the captured video stream, the framed video stream is used as video streams captured by the selection.

Ainsi, le flux vidéo à reproduit est amélioré en terme de pertinence.Thus, the video stream to be reproduced is improved in terms of relevance.

Avantageusement, le procédé de montage vidéo comporte une agrégation temporelle de flux vidéo sélectionnés, l’agrégation temporelle fournit un flux vidéo à reproduire constitué de flux vidéo sélectionnés successivement aux instants donnés.Advantageously, the video editing method comprises a temporal aggregation of selected video streams, the temporal aggregation provides a video stream to be reproduced consisting of video streams selected successively at given instants.

Avantageusement, la fréquence de sélection est fonction de données de contexte parmi les données de contexte suivantes :
- données de contexte de capture,
- données de contexte d’utilisation.Advantageously, the frequency of selection is a function of context data from among the following context data:
- capture context data,
- usage context data.

Avantageusement, selon une implémentation de l'invention, les différentes étapes du procédé selon l'invention sont mises en œuvre par un logiciel ou programme d'ordinateur, ce logiciel comprenant des instructions logicielles destinées à être exécutées par un processeur de données d'un dispositif de montage vidéo et étant conçus pour commander l'exécution des différentes étapes de ce procédé.Advantageously, according to an implementation of the invention, the various steps of the method according to the invention are implemented by computer software or program, this software comprising software instructions intended to be executed by a data processor of a video editing device and being designed to control the execution of the various steps of this process.

L'invention vise donc aussi un programme comprenant des instructions de code de programme pour l’exécution des étapes du procédé de montage vidéo automatisé lorsque ledit programme est exécuté par un processeur.The invention therefore also relates to a program comprising program code instructions for the execution of the steps of the automated video editing method when said program is executed by a processor.

Ce programme peut utiliser n'importe quel langage de programmation et être sous la forme de code source, code objet ou code intermédiaire entre code source et code objet tel que dans une forme partiellement compilée ou dans n'importe quelle autre forme souhaitable.This program can use any programming language and be in the form of source code, object code or intermediate code between source code and object code such as in a partially compiled form or in any other desirable form.

Un objet de l’invention est encore un dispositif de montage vidéo comportant un commutateur apte à sélectionner à un instant donné d’un flux vidéo parmi plusieurs flux vidéo captés en fonction de données détectées à l’instant donné dans les contenus des flux vidéo captés, le flux vidéo sélectionné à un instant donné étant intégré à partir de l’instant donné dans le flux vidéo à reproduire.An object of the invention is also a video editing device comprising a switch able to select at a given instant a video stream from among several captured video streams according to data detected at the given instant in the contents of the captured video streams , the video stream selected at a given time being integrated from the given time into the video stream to be reproduced.

Avantageusement, le dispositif de montage vidéo comporte un agrégateur de flux vidéo sélectionnés fournissant un flux vidéo à reproduire constitué des flux vidéo sélectionnés successivement aux instants donnés.Advantageously, the video editing device comprises a selected video stream aggregator supplying a video stream to be reproduced consisting of video streams selected successively at given times.

Avantageusement, le dispositif de montage vidéo comporte un récepteur de flux vidéo captés connectés à plusieurs caméras, les caméras fournissent les flux vidéo captés.Advantageously, the video editing device comprises a receiver of captured video streams connected to several cameras, the cameras supply the captured video streams.

Un objet de l’invention est aussi un dispositif de diffusion de flux vidéo à reproduire comportant :
- un dispositif de montage vidéo comportant un commutateur apte à sélectionner à un instant donné d’un flux vidéo parmi plusieurs flux vidéo captés en fonction de données détectées à l’instant donné dans les contenus des flux vidéo captés, le flux vidéo sélectionné à un instant donné étant intégré à partir de l’instant donné dans le flux vidéo à reproduire, et
- un émetteur par diffusion de flux à reproduire.An object of the invention is also a device for broadcasting video streams to be reproduced comprising:
- a video editing device comprising a switch able to select at a given instant of a video stream from among several captured video streams as a function of data detected at the given instant in the contents of the captured video streams, the video stream selected at a given instant being integrated from the given instant in the video stream to be reproduced, and
- a stream broadcast transmitter to be reproduced.

Un objet de l’invention est également un système de surveillance de flux vidéo comportant :An object of the invention is also a video stream monitoring system comprising:

- un dispositif de montage vidéo comportant un commutateur apte à sélectionner à un instant donné d’un flux vidéo parmi plusieurs flux vidéo captés en fonction de données détectées à l’instant donné dans les contenus des flux vidéo captés, le flux vidéo sélectionné à un instant donné étant intégré à partir de l’instant donné dans le flux vidéo à reproduire, et- a video editing device comprising a switch able to select at a given instant of a video stream from among several captured video streams as a function of data detected at the given instant in the contents of the captured video streams, the video stream selected at a given instant being integrated from the given instant in the video stream to be reproduced, and

- un écran reproduisant le flux vidéo à reproduire.- a screen reproducing the video stream to be reproduced.

Les caractéristiques et avantages de l’invention apparaîtront plus clairement à la lecture de la description, faite à titre d'exemple, et des figures s’y rapportant qui représentent :The characteristics and advantages of the invention will appear more clearly on reading the description, given by way of example, and the figures relating thereto which represent:

, un schéma simplifié d’un procédé de montage vidéo automatisé selon l’invention, , a simplified diagram of an automated video editing method according to the invention,

, un schéma simplifié illustrant les flux vidéo captés et le flux à reproduire généré par le procédé de montage vidéo automatisé selon l’invention, , a simplified diagram illustrating the captured video streams and the stream to be reproduced generated by the automated video editing method according to the invention,

, un schéma simplifié d’un dispositif de montage vidéo automatisé selon l’invention, , a simplified diagram of an automated video editing device according to the invention,

, un schéma simplifié d’un procédé de cadrage utilisé par le montage vidéo automatisé selon l’invention, , a simplified diagram of a framing method used by the automated video editing according to the invention,

, un schéma simplifié d’un dispositif de diffusion de flux vidéo selon l’invention, , a simplified diagram of a video streaming device according to the invention,

, un schéma simplifié d’un système de surveillance vidéo selon l’invention. , a simplified diagram of a video surveillance system according to the invention.

La illustre un schéma simplifié d’un procédé de montage vidéo automatisé selon l’invention.There illustrates a simplified diagram of an automated video editing method according to the invention.

Le procédé de montage vidéo automatisé MCVM comporte une sélection SLC à un instant donnétd’un flux vidéo fs(t) parmi plusieurs flux vidéo captés fc1(t), fc2(t)…fcN(t) en fonction de données détectées dd1(t), dd2(t)…ddN(t) à l’instant donnétdans les contenus des flux vidéo captés fc1(t), fc2(t)…fcN(t). Le flux vidéo sélectionné fs(t) à un instant donné est intégré à partir de l’instant donnétdans le flux vidéo à reproduire fr = {fs(t)}t.The automated video editing method MCVM comprises an SLC selection at a given time t of a video stream fs(t) from among several captured video streams fc 1 (t), fc 2 (t)…fc N (t) as a function of data detected dd 1 (t), dd 2 (t)…dd N (t) at the given instant t in the contents of the video streams captured fc 1 (t), fc 2 (t)…fc N (t). The video stream fs(t) selected at a given instant is integrated from the given instant t into the video stream to be reproduced fr={fs(t)} t .

En particulier, le procédé de montage vidéo MCVM comporte une association PD_ASS d’une valeur de pondération ip1(t), ip2(t)…ipN(t), aussi nommé indicateur de pertinence, à un instant donnétd’au moins un flux vidéo captés fc1(t), fc2(t)…fcN(t) en fonction de données détectées dd1(t), dd2(t)…ddN(t) à l’instant donnétdans les contenus des flux vidéo captés dd1(t), dd2(t)…ddN(t). La sélection SLC est fonction des valeurs de pondération ip1(t), ip2(t)…ipN(t) associée aux flux vidéo captés fc1(t), fc2(t)…fcN(t).In particular, the MCVM video editing process includes a PD_ASS association of a weighting value ip 1 (t), ip 2 (t)…ip N (t), also called relevance indicator, at a given instant t of at least one video stream captured fc 1 (t), fc 2 (t)…fc N (t) as a function of detected data dd 1 (t), dd 2 (t)…dd N (t) at the given instant t in the contents of the captured video streams dd 1 (t), dd 2 (t)…dd N (t). The SLC selection depends on the weighting values ip 1 (t), ip 2 (t)…ip N (t) associated with the captured video streams fc 1 (t), fc 2 (t)…fc N (t).

En particulier, le procédé de montage vidéo MCVM comporte un arbitrage ABT entre des flux vidéo captés présélectionnés en fonction d’une priorisation des données détectées par rapport au contexte d’utilisationcu, lorsque les flux vidéo captés présélectionnés sont associés à une même valeur de pondération à un instant donnéi . Le flux vidéo arbitré constitue le flux vidéo sélectionné fs(t).In particular, the MCVM video editing method includes ABT arbitration between pre-selected captured video streams according to a prioritization of the detected data with respect to the context of use cu , when the pre-selected captured video streams are associated with the same weighting value at a given time i . The arbitrated video stream constitutes the selected video stream fs(t).

En particulier, le procédé de montage vidéo MCVM comporte une incrustation INC de deux flux vidéo captés présélectionnés l’un dans l’autre, lorsque les flux vidéo captés présélectionnés sont associés à une même valeur de pondération à un instant donnét. Le flux vidéo incrusté fw(t) comportant les des flux vidéo captés présélectionnés constitue le flux vidéo sélectionné fs(t).In particular, the MCVM video editing process includes an INC embedding of two pre-selected captured video streams one into the other, when the pre-selected captured video streams are associated with the same weighting value at a given time t . The embedded video stream fw(t) comprising the pre-selected captured video streams constitutes the selected video stream fs(t).

En particulier, la sélection SLC est aussi fonction de paramètre de contexte d’utilisationpcudu flux vidéo à reproduire, notamment du type d’utilisateur, du métier de l’utilisateur : monteur de flux vidéo diffusés, spectateur de flux vidéo diffusé, opérateur de vidéosurveillance, etc.In particular, the SLC selection is also a function of the context of use parameter pcu of the video stream to be reproduced, in particular the type of user, the user's profession: broadcast video stream editor, viewer of broadcast video stream, operator CCTV, etc.

En particulier, le procédé de montage vidéo MCVM comporte un cadrage FCV (voir ) d’un flux vidéo capté fc(t) en fonction de données détectées dd(t) à l’instant donné t dans le flux vidéo capté fc(t). Le flux vidéo cadré est utilisé soit comme flux vidéo captés par la sélection, soit comme flux sélectionné, soit comme flux présélectionnés traités par l’incrustation INC.In particular, the MCVM video editing process includes FCV framing (see ) of a captured video stream fc(t) as a function of data detected dd(t) at the given time t in the captured video stream fc(t). The framed video stream is used either as video streams picked up by the selection, or as a selected stream, or as a pre-selected stream processed by the INC overlay.

En particulier, le procédé de montage vidéo MCVM comporte une agrégation FAG temporelle de flux vidéo sélectionnés fs(t). L’agrégation temporelle FAG fournit un flux vidéo à reproduire fr constitué de flux vidéo sélectionnés successivement aux instants donnés {fs(t)}t.In particular, the video editing method MCVM comprises a temporal FAG aggregation of selected video streams fs(t). The temporal aggregation FAG provides a video stream to be reproduced fr consisting of video streams selected successively at given instants {fs(t)} t .

En particulier, la fréquence de sélectionfslest fonction de données de contextedcparmi les données de contexte suivantes :
- données de contexte de capturedcc,
- données de contexte d’utilisationdcu.In particular, the selection frequency fsl is a function of context data dc from among the following context data:
- dcc capture context data,
- dcu usage context data.

Les données de contexte de capture sont notamment : le rythme musical, la vitesse des mouvements captés…The capture context data include: the musical rhythm, the speed of the captured movements, etc.

En particulier, le procédé de montage vidéo MCVM comporte plusieurs captures vidéo CPT mises en œuvre par des caméras. Les captures CPT fournissent les différents flux vidéo captés fc1, fc2…fcNà utiliser par le montage vidéo MCVM.In particular, the MCVM video editing method comprises several CPT video captures implemented by cameras. The CPT captures provide the different captured video streams fc 1 , fc 2 …fc N to be used by the MCVM video editing.

En particulier, le procédé de montage vidéo MCVM comporte une détection de données dd1(t), dd2(t)…ddN(t) dans les contenus audiovisuels transportés par les flux vidéo captés fc1(t), fc2(t)…fcN(t) à un instant donnét. Les données détectées dd1(t), dd2(t)…ddN(t) dans les contenus audiovisuels transportés par les flux vidéo captés fc1(t), fc2(t)…fcN(t) sont notamment des visages ee1(t), la luminosité ee2(t), les mouvements ee3(t), les objets (nombres, types, etc.) ee3(t), la teinte globale ee4(t), les types de cadrage ee5(t), les évènements sonores ou l’ambiance sonore (type, niveau ou variation de niveau sonore, etc.) ee6(t), etc. : ddn(t) = {eei(t)}i. Ainsi, un flux vidéo capté fc1(t), fc2(t)…fcN(t) est associé en continu ou du moins de manière périodique à des données détectées dd1(t), dd2(t)…ddN(t) (aussi nommés évènements élémentaires) qui apparaissent et disparaissent.In particular, the video editing process MCVM comprises a detection of data dd 1 (t), dd 2 (t)…dd N (t) in the audiovisual contents transported by the captured video streams fc 1 (t), fc 2 ( t)…fc N (t) at a given instant t . The data detected dd 1 (t), dd 2 (t)…dd N (t) in the audiovisual content transported by the captured video streams fc 1 (t), fc 2 (t)…fc N (t) are in particular faces ee 1 (t), brightness ee 2 (t), movements ee 3 (t), objects (numbers, types, etc.) ee 3 (t), global hue ee 4 (t), types framing ee 5 (t), sound events or the sound environment (type, level or variation in sound level, etc.) ee 6 (t), etc. : dd n (t) = {ee i (t)} i . Thus, a captured video stream fc 1 (t), fc 2 (t)…fc N (t) is continuously or at least periodically associated with detected data dd 1 (t), dd 2 (t)…dd N (t) (also called elementary events) which appear and disappear.

En particulier, le rythme de changement du flux sélectionné, aussi nommé fréquence de sélection, est notamment fonction de la périodicité de détection des données dans les flux vidéo captés. La fréquence de sélection est éventuellement fonction du contexte d’utilisation qui peut évoluer durant le montage, notamment à la demande d’un utilisateur, par exemple d’un utilisateur du montage vidéo MCVM et/ou d’un utilisateur du flux vidéo à reproduire. Ainsi, le spectateur d’un concert diffusé pourra demander un montage vif (fréquence de sélection élevée) focalisé sur certains détails (ordre de classification fourni par le spectateur ou fonction d’une requête du spectateur) dans un premier temps puis un montage plus contemplatif (fréquence de sélection plus basse) utilisant des plans plus larges en cours de concert.In particular, the rate of change of the selected stream, also called selection frequency, is in particular a function of the periodicity of detection of the data in the captured video streams. The frequency of selection is possibly a function of the context of use which may change during editing, in particular at the request of a user, for example of a user of the MCVM video editing and/or of a user of the video stream to be reproduced . Thus, the viewer of a broadcast concert will be able to request a lively editing (high selection frequency) focused on certain details (order of classification provided by the viewer or based on a request from the viewer) initially then a more contemplative editing (lower selection frequency) using wider shots during the concert.

En particulier, à une donnée détectée dd1(t), dd2(t)…ddN(t) est associée une valeur chiffrée, une valeur de pondération aussi nommé indicateur de pertinence ip1(t), ip2(t)…ipN(t). Ces valeurs sont notamment établies en fonction de l’usage de la vidéo, c’est-à-dire du contexte d’utilisation. Cela permet d’adapter le montage vidéo MCVM à l’utilisation de la vidéo montée.In particular, a detected datum dd 1 (t), dd 2 (t)…dd N (t) is associated with a numerical value, a weighting value also called relevance indicator ip 1 (t), ip 2 (t) …ip N (t). These values are notably established according to the use of the video, that is to say the context of use. This makes it possible to adapt the MCVM video editing to the use of the edited video.

Par exemple, pour une surveillance vidéo de sécurisation contre les intrusions d’un site, la pondération affectera une valeur plus importante aux données détectées correspondant à des mouvements ou à des visages (pour identifier les malfaiteurs); pour une surveillance vidéo de sécurisation contre les incendies, la pondération affectera une valeur plus importante aux données détectées correspondant à une luminosité particulière, à une ambiance sonore, etc. ; pour une diffusion d’une émission de télévision, la pondération affectera une valeur plus élevé à des visages, à une ambiance sonore particulière, etc. pour montrer l’ambiance du plateau de télévision.For example, for video surveillance to secure a site against intrusions, the weighting will assign a greater value to the detected data corresponding to movements or faces (to identify criminals); for fire safety video surveillance, the weighting will assign a greater value to the detected data corresponding to a particular luminosity, sound environment, etc. ; for a broadcast of a television program, the weighting will assign a higher value to faces, to a particular sound environment, etc. to show the atmosphere of the television set.

En particulier, la pondération PD_ASS utilise des règles de pondération prédéterminées, notamment stockées dans une base de règles (non illustrée). A partir de ces règles de pondération, une échelle de valeur de pondération est établie : par exemple, dans à un même instant d’un contenu audiovisuel (une image) d’un flux vidéo capté, un évènement élémentaire eei(t) faiblement important, notamment au regard du contexte d’utilisationcu, sera associé à une valeur égale à zéro et un évènement élémentaire important, notamment au regard du contexte d’utilisationcu, sera associé à une valeur égale à dix.In particular, the weighting PD_ASS uses predetermined weighting rules, in particular stored in a rule base (not shown). From these weighting rules, a weighting value scale is established: for example, at the same time of an audiovisual content (an image) of a captured video stream, an elementary event ee i (t) weakly important, in particular with regard to the context of use cu , will be associated with a value equal to zero and an important elementary event, in particular with regard to the context of use cu , will be associated with a value equal to ten.

Ainsi, un instant d’un contenu audiovisuel d’un flux vidéo capté fc(t) sera associé à une pondération ip(t) correspondant soit à la valeur de pondération de l’évènement élémentaire ee(t) le plus important des données détectées dd(t) dans le contenu audiovisuel du flux vidéo capté fc(t) à cet instant donné, soit à une valeur correspondant à la cumulation des valeurs de pondération de tout ou partie des évènements élémentaires {eei(t)}ides données détectées dd(t) dans le contenu audiovisuel du flux vidéo capté fc(t) à cet instant donné.Thus, an instant of audiovisual content of a captured video stream fc(t) will be associated with a weighting ip(t) corresponding either to the weighting value of the most important elementary event ee(t) of the detected data dd(t) in the audiovisual content of the captured video stream fc(t) at this given instant, or at a value corresponding to the accumulation of the weighting values of all or part of the elementary events {eeI(t)}Idetected data dd(t) in the audiovisual content of the captured video stream fc(t) at this given instant.

Par exemple, à un flux vidéo capté à un instant donné fc(t) sera associé à une valeur de pondération égale à ip(t) = 21. Cette valeur de pondération est associée PD_ASS au flux vidéo capté suite à une détection EVT_DTC de données dd(t) comportant une détection d’un visage ee1(t), une forte luminosité ee2(t), un cri ee(t). Le flux vidéo capté fct(t) sera associée une valeur de pondération de 7, en raison des valeurs de pondération respectives des évènements élémentaires des données détectés : valeur de 7 pour le visage, valeur de 8 pour la luminosité, valeur de 6 pour le cri.For example, a video stream captured at a given time fc(t) will be associated with a weighting value equal to ip(t) = 21. This weighting value is associated PD_ASS with the video stream captured following an EVT_DTC detection of data dd(t) comprising detection of a face ee 1 (t), high luminosity ee 2 (t), a cry ee(t). The captured video stream fct(t) will be associated with a weighting value of 7, due to the respective weighting values of the elementary events of the detected data: value of 7 for the face, value of 8 for the luminosity, value of 6 for the shout.

En particulier, la sélection SLC permet en fonction des données détectées {ddn(t)}n=1…N, voire des valeurs de pondération {ipn(t)}n=1…Nde sélectionner un flux video capté fs(t)=fci(t) parmi les flux vidéo captés {fcn(t)}n=1…N. Notamment, la sélection SLC comporte une comparaison IP_CMP des valeurs de pondération permettant de sélectionner le flux vidéo capté fs(t)=fci(t) parmi les flux vidéo captés {fcn(t)}n=1…N. Le flux vidéo sélectionné fs(t) est en particulier celui associé à la valeur de pondération la plus élevé (ou inversement la plus faible si les évènements élémentaires les plus importants sont notés avec des valeurs de pondération égale ou proche de zéro voire des valeurs négatives élevées (par exemple, échelle de pondération de -10 à 10)).In particular, the SLC selection allows, depending on the detected data {ddn(t)} n=1…N , or even the weighting values {ipn(t)} n=1…N to select a captured video stream fs(t) =fci(t) among captured video streams {fcn(t)} n=1…N . In particular, the SLC selection includes a comparison IP_CMP of the weighting values making it possible to select the captured video stream fs(t)=fci(t) from among the captured video streams {fcn(t)} n=1…N . The selected video stream fs(t) is in particular the one associated with the highest weighting value (or conversely the lowest if the most important elementary events are noted with weighting values equal to or close to zero or even negative values high (e.g. weighting scale from -10 to 10)).

Lorsque la sélection SLC, notamment la comparaison IP_CMP, ne permet pas de sélectionner un seul flux vidéo captés fci(t) mais plusieurs flux vidéo captés {fckj(t)}j=1…J(notamment deux flux vidéo captés) parmi les flux vidéo captés{fcn(t)}n=1…N, notamment en raison d’une association à une même valeur de pondération ipk1=ipk2=…=ipkJ, les flux vidéo captés à ce stade de sélection {fckj(t)}j=1…Jsont alors nommés des flux vidéo présélectionnés {fpskj(t)}j=1…J.When the SLC selection, in particular the IP_CMP comparison, does not make it possible to select a single captured video stream fci(t) but several captured video streams {fc kj (t)} j=1…J (in particular two captured video streams) among the captured video streams{fcn(t)} n=1…N , in particular due to association with the same weighting value ip k1 =ip k2 =…=ip kJ , the video streams captured at this stage of selection {fc kj (t)} j=1…J are then named preselected video streams {fps kj (t)} j=1…J .

Dans un premier mode de réalisation de la sélection, le procédé de montage vidéo MCVM met alors en œuvre un arbitrage ABT pour déterminer parmi les flux vidéo présélectionnés {fpskj(t)}j=1…Jle flux vidéo prioritaire fpskj(t) qui constituera le flux vidéo sélectionné fs(t). Notamment, les évènements élémentaires ee (t) des données détectées dd(t) étant classées par ordre de priorisation, le flux sélectionné fs(t) par l’arbitrage ABT sera celui comportant un évènement élémentaire ee(t) dans ces données détectés dd(t) prioritaire par rapport aux évènements élémentaires des données détectées des autres flux vidéo présélectionnés {fpskj(t)}j=1…J.In a first embodiment of the selection, the video editing method MCVM then implements an ABT arbitration to determine among the preselected video streams {fps kj (t)} j=1…J the priority video stream fps kj (t ) which will constitute the selected video stream fs(t). In particular, the elementary events ee (t) of the detected data dd(t) being classified in order of prioritization, the flow selected fs(t) by the ABT arbitration will be the one comprising an elementary event ee(t) in these detected data dd (t) takes priority over the elementary events of the detected data of the other preselected video streams {fps kj (t)} j=1…J .

Par exemple, la classification par ordre de priorité des évènements élémentaires (tel que visage > évènement sonore > luminosité, etc.) des données détectés sera établie et mémorisée préalablement à la mise en œuvre du procédé de montage vidéo MCVM, ou lors du démarrage du procédé de montage vidéo MCVM, ou lors d’un changement d’utilisation du flux vidéo monté. Notamment, la classification par ordre de priorité sera établie en fonction du contexte d’utilisationcu.For example, the classification by order of priority of the elementary events (such as face > sound event > luminosity, etc.) of the detected data will be established and stored prior to the implementation of the MCVM video editing process, or when starting the MCVM video editing process, or when there is a change in use of the edited video stream. In particular, the classification by order of priority will be established according to the context of use cu .

Dans un deuxième mode de réalisation de la sélection, le procédé de montage vidéo MCVM met alors en œuvre une incrustation INC d’au moins un flux présélectionné fpsk1(t) dans un autre flux présélectionné fpsk2(t). Le nombre de flux présélectionnés fpski(t) incrustés INC est fonction du mode d’utilisation, notamment la taille de l’écran de visualisation du flux vidéo. Dans l’exemple de la , ce nombre est de deux. Le mode d’incrustation sera fonction du nombre de flux vidéo à incruster, et/ou de la taille de l’écran de reproduction du flux vidéo à reproduire (c’est-à-dire notamment du contexte d’utilisation) et/ou de l’utilisation du flux vidéo reproduit (spectacle, vidéosurveillance…).In a second embodiment of the selection, the video editing method MCVM then implements an overlay INC of at least one preselected stream fps k1 (t) in another preselected stream fps k2 (t). The number of preselected streams fps ki (t) embedded INC depends on the mode of use, in particular the size of the screen for displaying the video stream. In the example of the , this number is two. The overlay mode will depend on the number of video streams to be overlaid, and/or the size of the screen displaying the video stream to be reproduced (i.e. in particular the context of use) and/or the use of the reproduced video stream (show, video surveillance, etc.).

Eventuellement, dans un mode de réalisation non illustré de la sélection SLC, un arbitrage ABT pourra effectuer une deuxième présélection (non illustrée) du nombre de flux incrustable, notamment de deux flux vidéo, parmi les flux vidéo présélectionnés {fpskj(t)}j=1…Jsi le nombre de flux incrustable est de deux. L’arbitrage ABT fournira alors les flux vidéo issus de cette deuxième présélection à l’incrustation INC.Optionally, in a non-illustrated embodiment of the SLC selection, an ABT arbitration may perform a second preselection (not illustrated) of the number of embeddable streams, in particular of two video streams, among the preselected video streams {fps kj (t)} j=1…J if the number of embeddable streams is two. The ABT arbitration will then supply the video streams resulting from this second preselection to the INC overlay.

Le flux sélectionné fs(t), quel que soit son mode de sélection : en utilisant ou non la comparaison IP_CMP, et/ou l’arbitrage ABT et/ou l’incrustation INC, sera intégré au flux à reproduire fr(t). Eventuellement, une agrégation FAG de flux vidéo permet d’intégrer le flux sélectionné fs(t) au flux à reproduire fr(t). Ainsi, un flux à reproduire fr(t) sera constitué d’une succession de flux sélectionnés à des instants distincts {fs(t)}tcorrespondant à des flux vidéo captés distincts.The selected stream fs(t), whatever its mode of selection: whether or not using the IP_CMP comparison, and/or the arbitration ABT and/or the embedding INC, will be integrated into the stream to be reproduced fr(t). Optionally, an aggregation FAG of video streams makes it possible to integrate the selected stream fs(t) into the stream to be reproduced fr(t). Thus, a stream to be reproduced fr(t) will consist of a succession of streams selected at distinct instants {fs(t)} t corresponding to distinct captured video streams.

Eventuellement, le procédé de montage vidéo MCVM permet de déclencherns_trgune itération de la sélection SLC et/ou de la détection de données EVT_DTV (suivie éventuellement de l’association d’une valeur de pondération PD_ASS) soit en continu, soit de de manière périodique. Le procédé de montage vidéo MCVM comporte notamment une vérification t=t0+mΔ ? de l’instant courant par rapport à la période déclenchantns_trgcette itération dès que la fin d’une période Δ est atteinte.Optionally, the MCVM video editing method makes it possible to trigger ns_trg an iteration of the SLC selection and/or of the EVT_DTV data detection (possibly followed by the association of a weighting value PD_ASS) either continuously, or in a periodic. The MCVM video editing process includes in particular a verification t=t 0 +mΔ? of the current instant with respect to the period triggering ns_trg this iteration as soon as the end of a period Δ is reached.

Un mode de réalisation particulier du procédé de montage vidéo est un programme comprenant des instructions de code de programme pour l’exécution des étapes du procédé de montage vidéo automatisé lorsque ledit programme est exécuté par un processeur.A particular embodiment of the video editing method is a program comprising program code instructions for the execution of the steps of the automated video editing method when said program is executed by a processor.

La illustre un schéma simplifié illustrant les flux vidéo captés et le flux à reproduire généré par le procédé de montage vidéo automatisé selon l’invention.There illustrates a simplified diagram illustrating the captured video streams and the stream to be reproduced generated by the automated video editing method according to the invention.

Le montage vidéo MCVM reçoit plusieurs flux vidéo captés ou capte plusieurs flux vidéo fc1(t), fc2(t)…fcN(t). Le flux vidéo à reproduire fr(t) fournit par le montage vidéo MCVM est composé par des séquences successives de plusieurs fc1(t), fc2(t)…fcN(t). En l’occurrence, la montre un montage vidéo MCVM utilisant une périodicité Δ de montage.The MCVM video editing receives several captured video streams or captures several video streams fc1(t), fc2(t)…fcN(t). The video stream to be reproduced fr(t) provided by the video editing MCVM is composed of successive sequences of several fc1(t), fc2(t)…fcN(t). In this case, the shows an MCVM video edit using an edit periodicity Δ.

La montre un flux à reproduire fr composé notamment, entre les instants tm+Δ et tm+2Δ, de la séquence correspondante d’un premier flux vidéo captés fc1(tm+Δ) ; puis, entre les instants tm+2Δ et tm+3Δ, de la séquence correspondante d’un n-unième flux vidéo captés fcn1(tm+2Δ) ; puis, entre les instants tm+3Δ et tm+4Δ, de la séquence correspondante d’un N-ième flux vidéo captés fcN(tm+3Δ) ; puis, entre les instants tm+4Δ et tm+5Δ, de la séquence correspondante d’un n-deuxième flux vidéo captés fcn2(tm+4Δ), etc.There shows a stream to be reproduced fr composed in particular, between the instants tm+Δ and tm+2Δ, of the corresponding sequence of a first video stream captured fc1(tm+Δ); then, between times tm+2Δ and tm+3Δ, of the corresponding sequence of an n-first video stream captured fcn1(tm+2Δ); then, between times tm+3Δ and tm+4Δ, of the corresponding sequence of an N-th video stream captured fcN(tm+3Δ); then, between times tm+4Δ and tm+5Δ, of the corresponding sequence of an n-second video stream captured fcn2(tm+4Δ), etc.

La illustre un schéma simplifié d’un dispositif de montage vidéo automatisé selon l’invention.There illustrates a simplified diagram of an automated video editing device according to the invention.

Le dispositif de montage vidéo 10 comporte un commutateur 103 apte à sélectionner à un instant donnétd’un flux vidéo fs(t) parmi plusieurs flux vidéo captés fc1(t), fc2(t)…fcN(t) en fonction de données détectées dd1(t), dd2(t)…ddN(t) à l’instant donnétdans les contenus des flux vidéo captés fc1(t), fc2(t)…fcN(t). Le flux vidéo sélectionné fs(t) à un instant donné est intégré à partir de l’instant donnétdans le flux vidéo à reproduire fr = {fs(t)}t.The video editing device 10 comprises a switch 103 capable of selecting at a given instant t of a video stream fs(t) from among several captured video streams fc 1 (t), fc 2 (t)…fc N (t) by function of data detected dd 1 (t), dd 2 (t)…dd N (t) at the given time t in the contents of the video streams captured fc 1 (t), fc 2 (t)…fc N (t ). The video stream fs(t) selected at a given instant is integrated from the given instant t into the video stream to be reproduced fr={fs(t)} t .

En particulier, le dispositif de montage vidéo 10 comporte un agrégateur 105 de flux vidéo sélectionnés fs(t) fournissant un flux vidéo à reproduire fr constitué des flux vidéo sélectionnés successivement aux instants donnés {fs(t)}t.In particular, the video editing device 10 comprises an aggregator 105 of selected video streams fs(t) supplying a video stream to be reproduced fr consisting of the video streams selected successively at given instants {fs(t)} t .

En particulier, le dispositif de montage vidéo 10 comporte un récepteur 100 de flux vidéo captés fc1(t), fc2(t)…fcN(t) connectés à plusieurs caméras. De manière alternative, le dispositif de montage vidéo 10 comporte un système de capture 100 comportant des caméras 1001…100N. Les caméras fournissent les flux vidéo captés fc1(t), fc2(t)…fcN(t).In particular, the video editing device 10 comprises a receiver 100 of captured video streams fc 1 (t), fc 2 (t)…fc N (t) connected to several cameras. Alternatively, the video editing device 10 comprises a capture system 100 comprising cameras 100 1 ...100 N . The cameras provide the captured video streams fc 1 (t), fc 2 (t)…fc N (t).

En particulier, le dispositif de montage vidéo 10 comporte un détecteur 101 de données dd1(t), dd2(t)…ddN(t) dans les contenus audiovisuels transportés par les flux vidéo captés fc1(t), fc2(t)…fcN(t) à un instant donnét. Ainsi, un flux vidéo capté fc1(t), fc2(t)…fcN(t) est associé en continu ou du moins de manière périodique à des données détectées dd1(t), dd2(t)…ddN(t) (aussi nommés évènements élémentaires) qui apparaissent et disparaissent.In particular, the video editing device 10 comprises a detector 101 of data dd 1 (t), dd 2 (t)…dd N (t) in the audiovisual content transported by the captured video streams fc 1 (t), fc 2 (t)…fc N (t) at a given instant t . Thus, a captured video stream fc 1 (t), fc 2 (t)…fc N (t) is continuously or at least periodically associated with detected data dd 1 (t), dd 2 (t)…dd N (t) (also called elementary events) which appear and disappear.

En particulier, le dispositif de montage vidéo 10 comporte un coupleur 102 associant une valeur de pondération ip1(t), ip2(t)…ipN(t), aussi nommé indicateur de pertinence, à un instant donnétd’au moins un flux vidéo captés fc1(t), fc2(t)…fcN(t) en fonction de données détectées dd1(t), dd2(t)…ddN(t) à l’instant donnétdans les contenus des flux vidéo captés dd1(t), dd2(t)…ddN(t). Le flux vidéo sélectionné fs(t) est fonction des valeurs de pondération ip1(t), ip2(t)…ipN(t) associée aux flux vidéo captés fc1(t), fc2(t)…fcN(t).In particular, the video editing device 10 comprises a coupler 102 associating a weighting value ip 1 (t), ip 2 (t)…ip N (t), also called relevance indicator, at a given instant t of at least one video stream captured fc 1 (t), fc 2 (t)…fc N (t) as a function of data detected dd 1 (t), dd 2 (t)…dd N (t) at the given instant t in the contents of the captured video streams dd 1 (t), dd 2 (t)…dd N (t). The selected video stream fs(t) depends on the weighting values ip 1 (t), ip 2 (t)…ip N (t) associated with the captured video streams fc 1 (t), fc 2 (t)…fc N (t).

En particulier, à une donnée détectée dd1(t), dd2(t)…ddN(t) est associée une valeur chiffrée, une valeur de pondération aussi nommé indicateur de pertinence ip1(t), ip2(t)…ipN(t). Ces valeurs sont notamment établies en fonction de l’usage de la vidéo, c’est-à-dire du contexte d’utilisation. Cela permet d’adapter le montage vidéo à l’utilisation de la vidéo montée.In particular, a detected datum dd 1 (t), dd 2 (t)…dd N (t) is associated with a numerical value, a weighting value also called relevance indicator ip 1 (t), ip 2 (t) …ip N (t). These values are notably established according to the use of the video, that is to say the context of use. This makes it possible to adapt the video editing to the use of the edited video.

En particulier, le coupleur 102 utilise des règles de pondération prédéterminées, notamment stockées dans une base de règles (non illustrée). A partir de ces règles de pondération, une échelle de valeur de pondération est établie : par exemple, dans à un même instant d’un contenu audiovisuel (une image) d’un flux vidéo capté, un évènement élémentaire eei(t) faiblement important, notamment au regard du contexte d’utilisationcu, sera associé à une valeur égale à zéro et un évènement élémentaire important, notamment au regard du contexte d’utilisationcu, sera associé à une valeur égale à dix.In particular, the coupler 102 uses predetermined weighting rules, in particular stored in a rule base (not shown). From these weighting rules, a weighting value scale is established: for example, at the same time of an audiovisual content (an image) of a captured video stream, an elementary event ee i (t) weakly important, in particular with regard to the context of use cu , will be associated with a value equal to zero and an important elementary event, in particular with regard to the context of use cu , will be associated with a value equal to ten.

Ainsi, un instant d’un contenu audiovisuel d’un flux vidéo capté fc(t) sera associé à une pondération ip(t) correspondant soit à la valeur de pondération de l’évènement élémentaire ee(t) le plus important des données détectées dd(t) dans le contenu audiovisuel du flux vidéo capté fc(t) à cet instant donné, soit à une valeur correspondant à la cumulation des valeurs de pondération de tout ou partie des évènements élémentaires {eei(t)}ides données détectées dd(t) dans le contenu audiovisuel du flux vidéo capté fc(t) à cet instant donné.Thus, an instant of audiovisual content of a captured video stream fc(t) will be associated with a weighting ip(t) corresponding either to the weighting value of the most important elementary event ee(t) of the detected data dd(t) in the audiovisual content of the captured video stream fc(t) at this given instant, or at a value corresponding to the accumulation of the weighting values of all or part of the elementary events {eeI(t)}Idetected data dd(t) in the audiovisual content of the captured video stream fc(t) at this given instant.

En particulier, le commutateur 103 permet en fonction des données détectées {ddn(t)}n=1…N, voire des valeurs de pondération {ipn(t)}n=1…Nde sélectionner un flux video capté fs(t)=fci(t) parmi les flux vidéo captés {fcn(t)}n=1…N. Notamment, le commutateur comporte un comparateur 1031 des valeurs de pondération permettant de sélectionner le flux vidéo capté fs(t)=fci(t) parmi les flux vidéo captés {fcn(t)}n=1…N. Le flux vidéo sélectionné fs(t) est en particulier celui associé à la valeur de pondération la plus élevé (ou inversement la plus faible si les évènements élémentaires les plus importants sont notés avec des valeurs de pondération égale ou proche de zéro voire des valeurs négatives élevées (par exemple, échelle de pondération de -10 à 10)).In particular, the switch 103 makes it possible, depending on the detected data {ddn(t)} n=1…N , or even the weighting values {ipn(t)} n=1…N , to select a captured video stream fs(t) =fci(t) among captured video streams {fcn(t)} n=1…N . In particular, the switch comprises a comparator 1031 of the weighting values making it possible to select the captured video stream fs(t)=fci(t) from among the captured video streams {fcn(t)} n=1…N . The selected video stream fs(t) is in particular the one associated with the highest weighting value (or conversely the lowest if the most important elementary events are noted with weighting values equal to or close to zero or even negative values high (e.g. weighting scale from -10 to 10)).

Lorsque le commutateur 103, notamment le comparateur 1031, ne permet pas de sélectionner un seul flux vidéo captés fci(t) mais plusieurs flux vidéo captés {fckj(t)}j=1…J(notamment deux flux vidéo captés) parmi les flux vidéo captés{fcn(t)}n=1…N, notamment en raison d’une association à une même valeur de pondération ipk1=ipk2=…=ipkJ, les flux vidéo captés à ce stade de sélection {fckj(t)}j=1…Jsont alors nommés des flux vidéo présélectionnés {fpskj(t)}j=1…J.When the switch 103, in particular the comparator 1031, does not make it possible to select a single captured video stream fci(t) but several captured video streams {fc kj (t)} j=1…J (in particular two captured video streams) among the captured video streams{fcn(t)} n=1…N , in particular due to association with the same weighting value ip k1 =ip k2 =…=ip kJ , the video streams captured at this stage of selection {fc kj (t)} j=1…J are then named preselected video streams {fps kj (t)} j=1…J .

En particulier, le dispositif de montage vidéo 10 comporte un analyseur 1032 apte à arbitrer, c’est-à-dire à déterminer parmi les flux vidéo présélectionnés {fpskj(t)}j=1…Jle flux vidéo prioritaire fpskj(t) qui constituera le flux vidéo sélectionné fs(t). Notamment, les évènements élémentaires ee (t) des données détectées dd(t) étant classées par ordre de priorisation, le flux sélectionné fs(t) par l’analyseur 1032 sera celui comportant un évènement élémentaire ee(t) dans ces données détectés dd(t) prioritaire par rapport aux évènements élémentaires des données détectées des autres flux vidéo présélectionnés {fpskj(t)}j=1…J.In particular, the video editing device 10 comprises an analyzer 1032 able to arbitrate, that is to say to determine from among the preselected video streams {fps kj (t)} j=1…J the priority video stream fps kj ( t) which will constitute the selected video stream fs(t). In particular, the elementary events ee (t) of the detected data dd(t) being classified in order of priority, the stream selected fs(t) by the analyzer 1032 will be the one comprising an elementary event ee(t) in these detected data dd (t) takes priority over the elementary events of the detected data of the other preselected video streams {fps kj (t)} j=1…J .

Par exemple, la classification par ordre de priorité des évènements élémentaires (tel que visage > évènement sonore > luminosité, etc.) des données détectés sera établie et mémorisée préalablement à la mise en œuvre du montage vidéo par le dispositif de montage vidéo 10, ou lors du démarrage du montage vidéo, ou lors d’un changement d’utilisation du flux vidéo monté. Notamment, la classification par ordre de priorité sera établie en fonction du contexte d’utilisationcu.For example, the classification by order of priority of the elementary events (such as face>sound event>brightness, etc.) of the detected data will be established and stored prior to the implementation of the video editing by the video editing device 10, or when starting video editing, or when changing use of the edited video stream. In particular, the classification by order of priority will be established according to the context of use cu .

En particulier, le dispositif de montage vidéo 10 comporte un dispositif d’incrustation 1033 d’au moins un flux présélectionné fpsk1(t) dans un autre flux présélectionné fpsk2(t). Le nombre de flux présélectionnés fpski(t) incrustés est fonction du mode d’utilisation, notamment la taille de l’écran de visualisation du flux vidéo. Le mode d’incrustation sera fonction du nombre de flux vidéo à incruster, et/ou de la taille de l’écran de reproduction du flux vidéo à reproduire (c’est-à-dire notamment du contexte d’utilisation) et/ou de l’utilisation du flux vidéo reproduit (spectacle, vidéosurveillance…).In particular, the video editing device 10 includes a device 1033 for embedding at least one preselected stream fps k1 (t) into another preselected stream fps k2 (t). The number of preselected streams fps ki (t) embedded depends on the mode of use, in particular the size of the screen for displaying the video stream. The overlay mode will depend on the number of video streams to be overlaid, and/or the size of the screen displaying the video stream to be reproduced (i.e. in particular the context of use) and/or the use of the reproduced video stream (show, video surveillance, etc.).

Eventuellement, l’analyseur 1032 pourra effectuer une deuxième présélection (non illustrée) du nombre de flux incrustable, notamment de deux flux vidéo, parmi les flux vidéo présélectionnés {fpskj(t)}j=1…Jsi le nombre de flux incrustable est de deux. L’analyseur 1032 fournira alors les flux vidéo issus de cette deuxième présélection au dispositif d’incrustation 1033.Optionally, the analyzer 1032 will be able to carry out a second preselection (not shown) of the number of incrustable streams, in particular of two video streams, among the preselected video streams {fps kj (t)} j=1…J if the number of incrustable streams is two. The analyzer 1032 will then supply the video streams resulting from this second preselection to the overlay device 1033.

Le flux sélectionné fs(t), quel que soit son mode de sélection : en utilisant ou non le comparateur 1031, et/ou l’analyseur 1032 et/ou le dispositif d’incrustation 1033, sera intégré au flux à reproduire fr(t). Eventuellement, l’agrégateur 105 de flux vidéo permet d’intégrer le flux sélectionné fs(t) au flux à reproduire fr(t). Ainsi, un flux à reproduire fr(t) sera constitué d’une succession de flux sélectionnés à des instants distincts {fs(t)}tcorrespondant à des flux vidéo captés distincts.The selected stream fs(t), whatever its mode of selection: using or not the comparator 1031, and/or the analyzer 1032 and/or the overlay device 1033, will be integrated into the stream to be reproduced fr(t ). Optionally, the video stream aggregator 105 makes it possible to integrate the selected stream fs(t) into the stream to be reproduced fr(t). Thus, a stream to be reproduced fr(t) will consist of a succession of streams selected at distinct instants {fs(t)} t corresponding to distinct captured video streams.

Eventuellement, le dispositif de montage vidéo 10 comporte un dispositif d’itération 106 permettant de déclencherns_trgune itération du commutateur 103 et/ou du détecteur de données 101 soit en continu, soit de de manière périodique.Optionally, the video editing device 10 comprises an iteration device 106 making it possible to trigger ns_trg an iteration of the switch 103 and/or of the data detector 101 either continuously or periodically.

En particulier, le dispositif de montage 10 comporte un dispositif de cadrage 1034, 104 respectivement implémenté soit dans le sélecteur 103, soit hors du sélecteur. Le dispositif de cadrage 1034, 104 est apte à sélectionner une partie du contenu disponible dans le flux sélectionné fs(t) et/ou un ou plusieurs flux présélectionné en fonction des données détectées. Le dispositif de cadrage 1034, 104 traite un flux, notamment un flux sélectionné, comme étant composé de plusieurs sous-flux correspondant chacun à une partie du contenu du flux traité par le dispositif de cadrage 1034, 104 alors le cadrage est apte à sélectionner un sous-flux parmi les sous-flux traités. Par exemple, le flux traité par le dispositif de cadrage est un flux fourni par une caméra 360, ce flux est décomposé en sous-flux correspondant dans notre exemple à une position angulaire, notamment un premier sous-flux pour un angle 0°-30°, un deuxième sous-flux pour un angle 30°-60°, …, un douzième sous-flux pour un angle 330°-360°. Le flux cadré correspondra à l’un de ces douze sous-flux, par exemple au premier sous-flux (plateau d’une émission TV) lorsque le montage détectera des données dont la valeur de pondération (animateur prenant la parole, notamment) est maximale associé à ce premier sous-flux, et un autre des douze sous-flux, notamment centrée sur une partie des spectateurs à un autre moment.In particular, the mounting device 10 comprises a framing device 1034, 104 respectively implemented either in the selector 103 or outside the selector. The framing device 1034, 104 is able to select part of the content available in the selected stream fs(t) and/or one or more preselected streams as a function of the detected data. The framing device 1034, 104 processes a stream, in particular a selected stream, as being composed of several sub-streams each corresponding to a part of the content of the stream processed by the framing device 1034, 104 then the framing is able to select a sub-flows among the processed sub-flows. For example, the stream processed by the framing device is a stream provided by a 360 camera, this stream is broken down into sub-streams corresponding in our example to an angular position, in particular a first sub-stream for an angle 0°-30 °, a second sub-flow for an angle 30°-60°, …, a twelfth sub-flow for an angle 330°-360°. The framed stream will correspond to one of these twelve sub-streams, for example to the first sub-stream (set of a TV show) when the editing detects data whose weighting value (host taking the floor, in particular) is maximum associated with this first sub-stream, and another of the twelve sub-streams, in particular centered on a part of the spectators at another time.

Un mode de réalisation particulier du procédé de montage vidéo est un programme comprenant des instructions de code de programme pour l’exécution des étapes du procédé de montage vidéo automatisé lorsque ledit programme est exécuté par un processeur.A particular embodiment of the video editing method is a program comprising program code instructions for the execution of the steps of the automated video editing method when said program is executed by a processor.

La illustre un schéma simplifié d’un procédé de cadrage utilisé par le montage vidéo automatisé selon l’invention.There illustrates a simplified diagram of a framing method used by the automated video editing according to the invention.

Le procédé de cadrage FVC permet de cadrer au moins un flux f(t): flux vidéo capté fc(t), flux vidéo présélectionné fps(t), flux vidéo sélectionné fs(t) en fonction de données détectées dd(t) dans le flux f(t). Le procédé de cadrage FVC est implémentable dans le procédé de montage vidéo automatisé MCVM selon l’invention, notamment tel qu’illustré par la .The FVC framing method makes it possible to frame at least one stream f(t): captured video stream fc(t), preselected video stream fps(t), selected video stream fs(t) as a function of data detected dd(t) in the flow f(t). The FVC framing method can be implemented in the automated video editing method MCVM according to the invention, in particular as illustrated by the .

Le procédé de cadrage FVC comporte une sélection SLC à un instant donnétd’un sous-flux vidéo sfs(t) parmi plusieurs sous-flux vidéo, notamment parmi plusieurs sous-flux vidéo captés, sf1(t), sf2(t)…sfN(t) en fonction de données détectées dd1(t), dd2(t)…ddN(t) à l’instant donnétdans les contenus le flux vidéo, notamment flux vidéo capté fc(t), composé desdits sous-flux. Le sous-flux vidéo sélectionné sfs(t) à un instant donné constitue le flux vidéo cadré. Ce flux vidéo cadré sfs(t) est apte à être intégré à partir de l’instant donnétdans le flux vidéo à reproduire fr = {fs(t)}t.The FVC framing method comprises an SLC selection at a given instant t of a video sub-stream sfs(t) from among several video sub-streams, in particular from among several captured video sub-streams, sf 1 (t), sf 2 ( t)…sf N (t) as a function of detected data dd 1 (t), dd 2 (t)…dd N (t) at the given time t in the contents the video stream, in particular captured video stream fc(t ), composed of said sub-streams. The selected video sub-stream sfs(t) at a given instant constitutes the framed video stream. This framed video stream sfs(t) is capable of being integrated from the given instant t into the video stream to be reproduced fr={fs(t)} t .

En particulier, le procédé de cadrage FVC comporte une association PD_ASS d’une valeur de pondération ip1(t), ip2(t)…ipN(t), aussi nommé indicateur de pertinence, à un instant donnétd’au moins un sous-flux vidéo sf1(t), sf2(t)…sfN(t) en fonction de données détectées dd1(t), dd2(t)…ddN(t) à l’instant donnétdans les contenus des sous-flux vidéo dd1(t), dd2(t)…ddN(t). La sélection SLC est fonction des valeurs de pondération ip1(t), ip2(t)…ipN(t) associée aux sous-flux vidéo sf1(t), sf2(t)…sfN(t).In particular, the FVC framing method comprises a PD_ASS association of a weighting value ip 1 (t), ip 2 (t)…ip N (t), also called relevance indicator, at a given instant t of at least least one video sub-stream sf 1 (t), sf2(t)…sf N (t) according to detected data dd 1 (t), dd 2 (t)…dd N (t) at the given time t in the contents of the video sub-streams dd 1 (t), dd 2 (t)…dd N (t). The SLC selection is a function of the weighting values ip 1 (t), ip 2 (t)…ip N (t) associated with the video sub-streams sf 1 (t), sf2(t)…sf N (t).

En particulier, la sélection SLC comporte un arbitrage ABT (tel que celui illustré par la figure 1) entre des sous-flux vidéo présélectionnés en fonction d’une priorisation des données détectées par rapport au contexte d’utilisationcu, lorsque les sous-flux vidéo présélectionnés sont associés à une même valeur de pondération à un instant donnéi . Le flux vidéo arbitré constitue le flux vidéo sélectionné fs(t).In particular, SLC selection includes ABT arbitration (such as that shown in Figure 1) between pre-selected video sub-streams according to a prioritization of the detected data with respect to the usage context cu , when the pre-selected video sub-streams are associated with the same weighting value at a given time i . The arbitrated video stream constitutes the selected video stream fs(t).

En particulier, la sélection SLC d’un sous-flux lors du cadrage FVC est aussi fonction de paramètre de contexte d’utilisationpcudu flux vidéo à reproduire, notamment du type d’utilisateur, du métier de l’utilisateur : monteur de flux vidéo diffusés, spectateur de flux vidéo diffusé, opérateur de vidéosurveillance, etc.In particular, the SLC selection of a sub-stream during FVC framing is also a function of the context of use parameter pcu of the video stream to be reproduced, in particular the type of user, the user's job: stream editor broadcast video, broadcast video stream viewer, CCTV operator, etc.

En particulier, le sous-flux sélectionné sfs(t) fournit par le cadrage FVC constitue le flux cadré éventuellement directement intégré par une agrégation FAG temporelle de flux vidéo dans le flux vidéo à reproduire. L’agrégation temporelle FAG fournit un flux vidéo à reproduire fr constitué de flux vidéo sélectionnés successivement aux instants donnés {fs(t)}t. In particular, the selected sub-stream sfs(t) supplied by the framing FVC constitutes the framed stream possibly directly integrated by a temporal aggregation FAG of video streams in the video stream to be reproduced. The temporal aggregation FAG provides a video stream to be reproduced fr consisting of video streams selected successively at given instants {fs(t)} t.

En particulier, préalablement au cadrage FVC est effectué une détection de données dd1(t), dd2(t)…ddN(t) dans les contenus audiovisuels transportés par les flux vidéo captés fc1(t), fc2(t)…fcN(t) à un instant donnét. Les données détectées dd1(t), dd2(t)…ddN(t) dans les contenus audiovisuels transportés par les flux vidéo captés fc1(t), fc2(t)…fcN(t) sont notamment des visages ee1(t), la luminosité ee2(t), les mouvements ee3(t), les objets (nombres, types, etc.) ee3(t), la teinte globale ee4(t), les types de cadrage ee5(t), les évènements sonores ou l’ambiance sonore (type, niveau ou variation de niveau sonore, etc.) ee6(t), etc. : ddn(t) = {eei(t)}i. Ainsi, un flux vidéo capté fc1(t), fc2(t)…fcN(t) est associé en continu ou du moins de manière périodique à des données détectées dd1(t), dd2(t)…ddN(t) (aussi nommés évènements élémentaires) qui apparaissent et disparaissent.In particular, prior to FVC framing, data detection dd 1 (t), dd 2 (t)…dd N (t) is carried out in the audiovisual content transported by the captured video streams fc 1 (t), fc 2 (t )…fc N (t) at a given instant t . The data detected dd 1 (t), dd 2 (t)…dd N (t) in the audiovisual content transported by the captured video streams fc 1 (t), fc 2 (t)…fc N (t) are in particular faces ee 1 (t), brightness ee 2 (t), movements ee 3 (t), objects (numbers, types, etc.) ee 3 (t), global hue ee 4 (t), types framing ee 5 (t), sound events or the sound environment (type, level or variation in sound level, etc.) ee 6 (t), etc. : dd n (t) = {ee i (t)} i . Thus, a captured video stream fc 1 (t), fc 2 (t)…fc N (t) is continuously or at least periodically associated with detected data dd 1 (t), dd 2 (t)…dd N (t) (also called elementary events) which appear and disappear.

Un mode de réalisation particulier du procédé de cadrage vidéo est un programme comprenant des instructions de code de programme pour l’exécution des étapes du procédé de cadrage vidéo automatisé lorsque ledit programme est exécuté par un processeur.A particular embodiment of the video framing method is a program comprising program code instructions for the execution of the steps of the automated video framing method when said program is executed by a processor.

La illustre un schéma simplifié d’un dispositif de diffusion de flux vidéo selon l’invention.There illustrates a simplified diagram of a video stream broadcasting device according to the invention.

Le dispositif de diffusion 1’ de flux vidéo à reproduire comporte :
- un dispositif de montage vidéo 10’ comportant un commutateur apte à sélectionner à un instant donné d’un flux vidéo parmi plusieurs flux vidéo captés fs(t) en fonction de données détectées dd1(t), dd2(t)…ddN(t) à l’instant donné dans les contenus des flux vidéo captés fc1(t), fc2(t)…fcN(t), le flux vidéo sélectionné à un instant donné étant intégré à partir de l’instant donné dans le flux vidéo à reproduire fr, et
- un émetteur 12’ de diffusion de flux à reproduire.The device 1' for broadcasting video streams to be reproduced comprises:
- a video editing device 10' comprising a switch capable of selecting at a given instant a video stream from among several captured video streams fs(t) as a function of detected data dd 1 (t), dd 2 (t)…dd N (t) at the given instant in the contents of the captured video streams fc 1 (t), fc 2 (t)…fc N (t), the video stream selected at a given instant being integrated from the instant given in the video stream to be reproduced fr, and
- a transmitter 12 'for streaming to be reproduced.

En particulier, le dispositif de diffusion 1’ comporte plusieurs caméras 11’1, …, 11’Nfournissant les flux vidéo captés au dispositif de montage vidéo 10’.In particular, the broadcasting device 1' comprises several cameras 11' 1 , ..., 11' N supplying the captured video streams to the video editing device 10'.

En particulier, le flux à reproduire fr est émis par l’émetteur de diffusion 12’ à destination d’au moins un terminal utilisateur {2u}u=1…Uvia un réseau de communication 3 (local ou distant, filaire ou sans fil, etc.).In particular, the stream to be reproduced fr is sent by the broadcast transmitter 12' to at least one user terminal {2 u } u=1...U via a communication network 3 (local or remote, wired or wireless wire, etc.).

En particulier, le dispositif de diffusion 1’ de flux vidéo comporte en outre, un dispositif de stockage de flux 15’, notamment une base de flux, dans lequel le flux vidéo fr est stocké préalablement à sa diffusion par l’émetteur 12’ et après son montage par le dispositif de montage 10’. Ainsi, le flux vidéo à reproduire peut soit diffusé en direct (en live en anglais) et/ou en différé, voire en diffusé en rattrapage (en replay en anglais).In particular, the video stream broadcasting device 1' further comprises a stream storage device 15', in particular a stream base, in which the video stream fr is stored prior to its broadcasting by the transmitter 12' and after it has been mounted by the mounting device 10'. Thus, the video stream to be reproduced can either be broadcast live (live in English) and/or deferred, or even broadcast in catch-up (in replay in English).

En particulier, le dispositif de diffusion 1’ comporte un enregistreur 13’ apte à stocker le flux à reproduire dans un dispositif de stockage 15’.In particular, the broadcasting device 1' includes a recorder 13' capable of storing the stream to be reproduced in a storage device 15'.

En particulier, le dispositif de diffusion 1’ comporte un lecteur de flux 14’ apte à lire un flux stocké dans un dispositif de stockage 15’ et à le fournir à l’émetteur 12’. Notamment, le lecteur de flux 14’ est commandé par une requête utilisateur dans le cas d’un flux de rattrapage ou « replay ».In particular, the broadcasting device 1′ includes a stream reader 14′ able to read a stream stored in a storage device 15′ and to supply it to the transmitter 12′. In particular, the 14' stream reader is controlled by a user request in the case of a catch-up or "replay" stream.

La illustre un schéma simplifié d’un système de surveillance vidéo selon l’invention.There illustrates a simplified diagram of a video surveillance system according to the invention.

Le système de surveillance 1’’ de flux vidéo comporte :The 1” video stream surveillance system includes:

- un dispositif de montage vidéo 10’’ comportant un commutateur apte à sélectionner à un instant donné d’un flux vidéo parmi plusieurs flux vidéo captés s(t) en fonction de données détectées dd1(t), dd2(t)…ddN(t) à l’instant donné dans les contenus des flux vidéo captés fc1(t), fc2(t)…fcN(t), le flux vidéo sélectionné à un instant donné étant intégré à partir de l’instant donné dans le flux vidéo à reproduire fr, et- a 10'' video editing device comprising a switch capable of selecting at a given instant a video stream from among several captured video streams s(t) as a function of detected data dd 1 (t), dd 2 (t)... dd N (t) at the given instant in the contents of the captured video streams fc 1 (t), fc 2 (t)…fc N (t), the video stream selected at a given instant being integrated from the given instant in the video stream to be reproduced fr, and

- un écran 17’’ reproduisant le flux vidéo à reproduire fr.- a 17'' screen reproducing the video stream to be reproduced fr.

En particulier, le système de surveillance 1’’ comporte plusieurs caméras 11’’1, …, 11’’Nfournissant les flux vidéo captés au dispositif de montage vidéo 10’’.In particular, the surveillance system 1″ comprises several cameras 11″ 1 , …, 11″ N supplying the captured video streams to the video editing device 10″.

En particulier, le système de surveillance 1’’ de flux vidéo comporte en outre, un dispositif de stockage de flux 15’’, notamment une base de flux, dans lequel le flux vidéo fr est stocké préalablement à sa reproduction par l’écran 17’’ et après son montage par le dispositif de montage 10’. Ainsi, le flux vidéo à reproduire peut soit reproduit en direct (en live en anglais) et/ou en différé.In particular, the video stream monitoring system 1″ further comprises a stream storage device 15″, in particular a stream base, in which the video stream fr is stored prior to its reproduction by the screen 17 '' and after its mounting by the mounting device 10'. Thus, the video stream to be reproduced can either be reproduced live (live in English) and/or deferred.

En particulier, le système de surveillance 1’’ comporte un enregistreur 13’’ apte à stocker le flux à reproduire dans un dispositif de stockage 15’’.In particular, the 1" surveillance system includes a 13" recorder capable of storing the stream to be reproduced in a 15" storage device.

En particulier, le système de surveillance 1’’ comporte un lecteur de flux 14’’ apte à lire un flux stocké dans un dispositif de stockage 15’’ et à le fournir à l’écran 17’’. Notamment, le lecteur de flux 14’‘ est commandé par une requête utilisateur dans le cas d’un flux différé.In particular, the 1" surveillance system includes a 14" stream reader capable of reading a stream stored in a 15" storage device and supplying it to the 17" screen. In particular, the 14'' stream reader is controlled by a user request in the case of a deferred stream.

En particulier, l’écran 17’’ est implémenté dans un terminal, tel qu’un téléviseur ou un terminal de communication, tel qu’une tablette, un smartphone, un ordinateur, etc.In particular, the 17" screen is implemented in a terminal, such as a television or a communication terminal, such as a tablet, a smartphone, a computer, etc.

Ainsi, l’invention propose un dispositif de montage intelligent personnalisé multi caméra temps réel grâce à la délégation du montage à un sélecteur (notamment implémenté sous la forme d’un algorithme mettant en œuvre les étapes du procédé de montage selon l’invention), l’adaptation du montage au contexte utilisateur (notamment en fonction des préférences de l’utilisateur : dynamique, point de focalisation – par exemple, visage -, couleurs, lumineux, cadrage, etc.), le cadrage automatique notamment dans des formats vidéo complexes comma le vidéo à 360°, le mixage automatisé des pistes audio associés, etc.Thus, the invention proposes a personalized intelligent real-time multi-camera editing device thanks to the delegation of editing to a selector (in particular implemented in the form of an algorithm implementing the steps of the editing method according to the invention), adaptation of the editing to the user context (in particular according to the user's preferences: dynamics, focal point - for example, face -, colors, light, framing, etc.), automatic framing, particularly in complex video formats such as 360° video, automated mixing of associated audio tracks, etc.

L'invention vise aussi un support. Le support d'informations peut être n'importe quelle entité ou dispositif capable de stocker le programme. Par exemple, le support peut comporter un moyen de stockage, tel qu'une ROM, par exemple un CD ROM ou une ROM de circuit microélectronique ou encore un moyen d'enregistrement magnétique, par exemple une disquette ou un disque dur.The invention also relates to a support. The information carrier can be any entity or device capable of storing the program. For example, the medium may include a storage medium, such as a ROM, for example a CD ROM or a microelectronic circuit ROM or else a magnetic recording medium, for example a floppy disk or a hard disk.

D'autre part, le support d'informations peut être un support transmissible tel qu'un signal électrique ou optique qui peut être acheminé via un câble électrique ou optique, par radio ou par d'autres moyens. Le programme selon l'invention peut être en particulier téléchargé sur un réseau notamment de type Internet.On the other hand, the information medium can be a transmissible medium such as an electrical or optical signal which can be conveyed via an electrical or optical cable, by radio or by other means. The program according to the invention can in particular be downloaded onto a network, in particular of the Internet type.

Alternativement, le support d'informations peut être un circuit intégré dans lequel le programme est incorporé, le circuit étant adapté pour exécuter ou pour être utilisé dans l'exécution du procédé en question.Alternatively, the information carrier may be an integrated circuit in which the program is incorporated, the circuit being adapted to execute or to be used in the execution of the method in question.

Dans une autre implémentation, l'invention est mise en œuvre au moyen de composants logiciels et/ou matériels. Dans cette optique le terme module peut correspondre aussi bien à un composant logiciel ou à un composant matériel. Un composant logiciel correspond à un ou plusieurs programmes d'ordinateur, un ou plusieurs sous-programmes d'un programme, ou de manière plus générale à tout élément d'un programme ou d'un logiciel apte à mettre en œuvre une fonction ou un ensemble de fonction selon la description ci-dessus. Un composant matériel correspond à tout élément d'un ensemble matériel (ou hardware) apte à mettre en œuvre une fonction ou un ensemble de fonctions.In another implementation, the invention is implemented using software and/or hardware components. From this perspective, the term module can correspond either to a software component or to a hardware component. A software component corresponds to one or more computer programs, one or more sub-programs of a program, or more generally to any element of a program or software capable of implementing a function or a function set as described above. A hardware component corresponds to any element of a hardware assembly capable of implementing a function or a set of functions.

Claims (14)

Procédé de montage vidéo automatisé comportant une sélection à un instant donné d’un flux vidéo parmi plusieurs flux vidéo captés en fonction de données détectées à l’instant donné dans les contenus des flux vidéo captés, le flux vidéo sélectionné à un instant donné étant intégré à partir de l’instant donné dans le flux vidéo à reproduire.Automated video editing method comprising a selection at a given instant of a video stream from among several captured video streams as a function of data detected at the given instant in the contents of the captured video streams, the video stream selected at a given instant being integrated from the instant given in the video stream to be reproduced. Procédé de montage vidéo automatisé selon la revendication précédente, le procédé de montage vidéo comportant une association d’une valeur de pondération à un instant donné d’au moins un flux vidéo captés en fonction de données détectées à l’instant donné dans les contenus des flux vidéo captés, la sélection est fonction des valeurs de pondération associée aux flux vidéo captés.Automated video editing method according to the preceding claim, the video editing method comprising an association of a weighting value at a given instant of at least one video stream captured as a function of data detected at the given instant in the contents of the captured video streams, the selection is based on the weighting values associated with the captured video streams. Procédé de montage vidéo automatisé selon la revendication précédente, le procédé de montage vidéo comportant un arbitrage entre des flux vidéo captés présélectionnés en fonction d’une priorisation des données détectées par rapport au contexte d’utilisation, lorsque les flux vidéo captés présélectionnés sont associés à une même valeur de pondération à un instant donné, le flux vidéo arbitré constitue le flux vidéo sélectionné.Automated video editing method according to the preceding claim, the video editing method comprising an arbitration between preselected captured video streams according to a prioritization of the detected data with respect to the context of use, when the preselected captured video streams are associated with same weighting value at a given instant, the arbitrated video stream constitutes the selected video stream. Procédé de montage vidéo automatisé selon la revendication précédente, le procédé de montage vidéo comportant une incrustation de deux flux vidéo captés présélectionnés l’un dans l’autre, lorsque les flux vidéo captés présélectionnés sont associés à une même valeur de pondération à un instant donné, le flux vidéo incrusté comportant les des flux vidéo captés présélectionnés constitue le flux vidéo sélectionné.Automated video editing method according to the preceding claim, the video editing method comprising an embedding of two preselected captured video streams one inside the other, when the preselected captured video streams are associated with the same weighting value at a given instant , the embedded video stream comprising the preselected captured video streams constitutes the selected video stream. Procédé de montage vidéo automatisé selon l’une quelconque des revendications précédentes, dans lequel la sélection est aussi fonction de paramètre de contexte d’utilisation du flux vidéo à reproduire.Automated video editing method according to any one of the preceding claims, in which the selection is also a function of the context of use parameter of the video stream to be reproduced. Procédé de montage vidéo automatisé selon l’une quelconque des revendications précédentes, le procédé de montage vidéo comportant un cadrage d’un flux vidéo capté en fonction de données détectées à l’instant donné dans le flux vidéo capté, le flux vidéo cadré est utilisé comme flux vidéo captés par la sélection.Automated video editing method according to any one of the preceding claims, the video editing method comprising a framing of a captured video stream according to data detected at the given instant in the captured video stream, the framed video stream is used as video streams picked up by the selection. Procédé de montage vidéo automatisé selon l’une quelconque des revendications précédentes, le procédé de montage vidéo comportant une agrégation temporelle de flux vidéo sélectionnés, l’agrégation temporelle fournit un flux vidéo à reproduire constitué de flux vidéo sélectionnés successivement aux instants donnés.Automated video editing method according to any one of the preceding claims, the video editing method comprising a temporal aggregation of selected video streams, the temporal aggregation provides a video stream to be reproduced consisting of video streams selected successively at given instants. Procédé de montage vidéo automatisé selon l’une quelconque des revendications précédentes, dans lequel la fréquence de sélection est fonction de données de contexte parmi les données de contexte suivantes :
- données de contexte de capture,
- données de contexte d’utilisation.Automated video editing method according to any one of the preceding claims, in which the frequency of selection is a function of context data among the following context data:
- capture context data,
- usage context data. Programme comprenant des instructions de code de programme pour l’exécution des étapes du procédé de montage vidéo automatisé selon l’une quelconque des revendications précédentes lorsque ledit programme est exécuté par un processeur.A program comprising program code instructions for performing the steps of the automated video editing method according to any preceding claim when said program is executed by a processor. Dispositif de montage vidéo comportant un commutateur apte à sélectionner à un instant donné d’un flux vidéo parmi plusieurs flux vidéo captés en fonction de données détectées à l’instant donné dans les contenus des flux vidéo captés, le flux vidéo sélectionné à un instant donné étant intégré à partir de l’instant donné dans le flux vidéo à reproduire.Video editing device comprising a switch able to select at a given instant of a video stream from among several captured video streams as a function of data detected at the given instant in the contents of the captured video streams, the video stream selected at a given instant being integrated from the given instant into the video stream to be reproduced. Dispositif de montage vidéo selon la revendication précédente, le dispositif de montage vidéo comportant un agrégateur de flux vidéo sélectionnés fournissant un flux vidéo à reproduire constitué des flux vidéo sélectionnés successivement aux instants donnés.Video editing device according to the preceding claim, the video editing device comprising a selected video stream aggregator supplying a video stream to be reproduced consisting of video streams selected successively at given instants. Dispositif de montage vidéo selon l’une quelconque revendication 10 ou 11, le dispositif de montage vidéo comportant un récepteur de flux vidéo captés connectés à plusieurs caméras, les caméras fournissent les flux vidéo captés.Video editing device according to any one of claims 10 or 11, the video editing device comprising a receiver of captured video streams connected to several cameras, the cameras providing the captured video streams. Dispositif de diffusion de flux vidéo à reproduire comportant :
- un dispositif de montage vidéo comportant un commutateur apte à sélectionner à un instant donné d’un flux vidéo parmi plusieurs flux vidéo captés en fonction de données détectées à l’instant donné dans les contenus des flux vidéo captés, le flux vidéo sélectionné à un instant donné étant intégré à partir de l’instant donné dans le flux vidéo à reproduire, et
- un émetteur par diffusion de flux à reproduire.Device for broadcasting video streams to be reproduced comprising:
- a video editing device comprising a switch able to select at a given instant of a video stream from among several captured video streams as a function of data detected at the given instant in the contents of the captured video streams, the video stream selected at a given instant being integrated from the given instant in the video stream to be reproduced, and
- a stream broadcast transmitter to be reproduced. Système de surveillance de flux vidéo comportant :
- un dispositif de montage vidéo comportant un commutateur apte à sélectionner à un instant donné d’un flux vidéo parmi plusieurs flux vidéo captés en fonction de données détectées à l’instant donné dans les contenus des flux vidéo captés, le flux vidéo sélectionné à un instant donné étant intégré à partir de l’instant donné dans le flux vidéo à reproduire, et
- un écran reproduisant le flux vidéo à reproduire.
Video stream monitoring system comprising:
- a video editing device comprising a switch able to select at a given instant of a video stream from among several captured video streams as a function of data detected at the given instant in the contents of the captured video streams, the video stream selected at a given instant being integrated from the given instant in the video stream to be reproduced, and
- a screen reproducing the video stream to be reproduced.
FR2013259A 2020-12-15 2020-12-15 Automated video editing method and device, broadcasting device and monitoring system implementing same Withdrawn FR3117715A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
FR2013259A FR3117715A1 (en) 2020-12-15 2020-12-15 Automated video editing method and device, broadcasting device and monitoring system implementing same

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR2013259A FR3117715A1 (en) 2020-12-15 2020-12-15 Automated video editing method and device, broadcasting device and monitoring system implementing same
FR2013259 2020-12-15

Publications (1)

Publication Number Publication Date
FR3117715A1 true FR3117715A1 (en) 2022-06-17

Family

ID=74860094

Family Applications (1)

Application Number Title Priority Date Filing Date
FR2013259A Withdrawn FR3117715A1 (en) 2020-12-15 2020-12-15 Automated video editing method and device, broadcasting device and monitoring system implementing same

Country Status (1)

Country Link
FR (1) FR3117715A1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100017716A1 (en) * 2006-08-25 2010-01-21 Koninklijke Philips Electronics N.V. Method and apparatus for generating a summary
US20150302894A1 (en) * 2010-03-08 2015-10-22 Sightera Technologies Ltd. System and method for semi-automatic video editing
US20160099025A1 (en) * 2014-10-03 2016-04-07 FieldCast, LLC Point of view video processing and curation platform

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100017716A1 (en) * 2006-08-25 2010-01-21 Koninklijke Philips Electronics N.V. Method and apparatus for generating a summary
US20150302894A1 (en) * 2010-03-08 2015-10-22 Sightera Technologies Ltd. System and method for semi-automatic video editing
US20160099025A1 (en) * 2014-10-03 2016-04-07 FieldCast, LLC Point of view video processing and curation platform

Similar Documents

Publication Publication Date Title
US8208792B2 (en) Content shooting apparatus for generating scene representation metadata
US7884860B2 (en) Content shooting apparatus
US10049702B2 (en) Digital video recorder options for editing content
FR2845555A1 (en) INTERACTIVE TELEVISION RECEIVING AND BROADCASTING METHODS AND ASSOCIATED DEVICES
FR3004054A1 (en) GENERATING AND RETURNING A FLOW REPRESENTATIVE OF AUDIOVISUAL CONTENT
FR3117715A1 (en) Automated video editing method and device, broadcasting device and monitoring system implementing same
FR2841724A1 (en) SYNCHRONIZATION SYSTEM AND METHOD FOR AUDIOVISUAL PROGRAMS, DEVICES AND RELATED METHODS
EP1258140B1 (en) Method for visual display of broadcast audio-visual programmes and associated visual display device
EP2597886A1 (en) Method for broadcasting push video-on-demand programmes and decoder for same
FR3127664A1 (en) Method for generating a personalized television channel for a user of at least one audiovisual content broadcasting service, method for processing a request for access to the personalized channel, devices, service equipment, user terminal, system and corresponding computer programs.
EP1182878A1 (en) Communication system, transmitter, receiver, method using a data storage descriptor
WO2001091462A1 (en) Device and method for synchronising broadcast audio-visual programmes and complementary data
FR2818484A1 (en) METHOD FOR MEASURING AUDIENCE OF INTERACTIVE BROADCASTED OR ON-BOARD APPLICATIONS ON A TELEVISION RECEIVER DECODER
EP2081383A2 (en) Method for preparing content for audiovisual programmes and associated system
WO2023208688A1 (en) Management of the rendering of an item of multimedia content
FR2956787A1 (en) METHOD AND SERVER FOR DETECTING A VIDEO PROGRAM RECEIVED BY A USER
FR2821512A1 (en) DEVICES FOR CONTROLLING AUDIO AND / OR VIDEO FILES AND CORRESPONDING TRANSMISSION DEVICES, METHODS AND PRODUCTS
EP0446334B1 (en) Device for programmed recording by recognition of reference signals
WO2005081249A1 (en) Method and system for integrating and/or randomly reproducing images from an information storage medium
WO2020201148A1 (en) Method for modifying multimedia content
US20130227597A1 (en) Personal program channel
EP4254968A1 (en) Method for generating a virtual television channel for a user of at least one audiovisual content broadcast service, corresponding generation device, service equipment and computer program
FR3105689A1 (en) Analysis of multimedia content
FR3110266A1 (en) NOTIFICATION PROVIDING PRIOR KNOWLEDGE OF AN EXCITING MOMENT FOR LIVE EVENTS
FR3049801A1 (en) METHOD FOR DIFFUSION OF AT LEAST ONE DATA SEQUENCE ON SMARTPHONE OR TABLET-TYPE PORTABLE TERMINALS

Legal Events

Date Code Title Description
PLFP Fee payment

Year of fee payment: 2

PLSC Publication of the preliminary search report

Effective date: 20220617

ST Notification of lapse

Effective date: 20230808