FR2988964A1 - Method for receiving immersive video content by client entity i.e. smartphone, involves receiving elementary video stream, and returning video content to smartphone from elementary video stream associated with portion of plan - Google Patents
Method for receiving immersive video content by client entity i.e. smartphone, involves receiving elementary video stream, and returning video content to smartphone from elementary video stream associated with portion of plan Download PDFInfo
- Publication number
- FR2988964A1 FR2988964A1 FR1252932A FR1252932A FR2988964A1 FR 2988964 A1 FR2988964 A1 FR 2988964A1 FR 1252932 A FR1252932 A FR 1252932A FR 1252932 A FR1252932 A FR 1252932A FR 2988964 A1 FR2988964 A1 FR 2988964A1
- Authority
- FR
- France
- Prior art keywords
- elementary
- video
- video stream
- video content
- entity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
- H04N21/64322—IP
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6581—Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
Abstract
Description
Technique de distribution d'un contenu vidéo de type immersif L'invention se situe dans le domaine de la distribution de contenus numériques dans un réseau de communication, et plus particulièrement de contenus vidéo de type immersif. The invention relates to the distribution of digital content in a communication network, and more particularly to immersive type video content.
On appelle contenu vidéo de type immersif une vidéo pour laquelle un utilisateur peut visualiser une scène dans son ensemble. Un contenu vidéo de type sphérique est un exemple de contenu vidéo de type immersif. Il est représenté sur une sphère et permet ainsi de représenter la scène à 360 degrés. En pratique, cette scène est projetée sur un plan rectangulaire pour former un flux vidéo. On considère que l'entité cliente se situe au centre de la sphère. Le flux vidéo correspondant à la projection sur un plan est distribué à l'entité cliente. Puis, en fonction d'une orientation de l'entité cliente, un champ d'observation du contenu est déterminé et le flux vidéo défini par ce champ d'observation est restitué à l'entité cliente. Pour obtenir une qualité correcte du contenu lors de sa restitution à l'entité cliente, des résolutions élevées des images sont utilisées pour coder le flux vidéo. A titre d'exemples illustratifs, des résolutions de 2000 x 1000 pixels, voire 3500 x 1750 pixels, sont utilisées pour coder une image du flux. Pour un contenu vidéo de type immersif, ceci revient à transmettre à l'entité cliente un flux vidéo de cette résolution à un débit de plusieurs Mbits par seconde. Or l'entité cliente peut être un terminal mobile qui accède par l'intermédiaire d'un réseau d'accès radio. La transmission du flux vidéo utilise des ressources du réseau d'accès radio importantes, telles que la bande passante. D'autre part, la réception du flux vidéo puis son traitement avant restitution à l'utilisateur de l'entité cliente mobilisent également des ressources du terminal mobile, telles que de la puissance de calcul, de la mémoire et de l'énergie. La distribution et la restitution de tels contenus à des terminaux aux ressources limitées, notamment des terminaux mobiles, sont ainsi difficiles à mettre en oeuvre. Un des buts de l'invention est de remédier à des insuffisances/inconvénients de l'état de la technique et/ou d'y apporter des améliorations. Selon un premier aspect, l'invention a pour objet un procédé de réception d'un contenu vidéo de type immersif par une entité cliente, ledit contenu vidéo étant codé sous la forme d'un flux vidéo correspondant à une projection sur un plan du contenu vidéo, ledit procédé comprenant les étapes suivantes mises en oeuvre par l'entité cliente : - une étape d'obtention d'un champ d'observation associé à l'entité cliente ; - une étape de détermination d'une première partie du plan en fonction du champ d'observation obtenu et d' au moins une information relative à une capacité spatiale de restitution de l'entité cliente ; - une étape d'envoi à au moins une entité de distribution d'une requête de distribution relative à ladite première partie du plan ; - une étape de réception d' au moins un flux vidéo élémentaire associé à ladite première partie déterminée en provenance de ladite entité de distribution, le flux vidéo étant préalablement segmenté spatialement en une pluralité de flux vidéo élémentaires associés à des zones du plan ; le contenu vidéo étant restitué à l'entité cliente à partir dudit au moins un flux vidéo élémentaire reçu associé à la première partie du plan. L'invention tire son origine de problèmes liés à la distribution d'un contenu vidéo de type immersif à un terminal aux ressources limitées, tel qu'un terminal mobile accédant au contenu par l'intermédiaire d'un réseau d'accès radio. Toutefois, l'invention est également applicable à tout type d'entités clientes ou de réseaux d'accès. An immersive video content is a video for which a user can view a scene as a whole. Spherical video content is an example of immersive video content. It is represented on a sphere and thus allows to represent the scene at 360 degrees. In practice, this scene is projected on a rectangular plane to form a video stream. The client entity is considered to be at the center of the sphere. The video stream corresponding to the projection on a plane is distributed to the client entity. Then, according to an orientation of the client entity, a field of observation of the content is determined and the video stream defined by this field of observation is returned to the client entity. To obtain a correct quality of the content when it is returned to the client entity, high resolutions of the images are used to encode the video stream. As illustrative examples, resolutions of 2000 x 1000 pixels, or even 3500 x 1750 pixels, are used to encode an image of the stream. For immersive video content, this amounts to transmitting to the client entity a video stream of this resolution at a bit rate of several Mbits per second. Or the client entity can be a mobile terminal that accesses via a radio access network. The transmission of the video stream uses important radio access network resources, such as bandwidth. On the other hand, the reception of the video stream and its processing before rendering to the user of the client entity also mobilize resources of the mobile terminal, such as computing power, memory and energy. The distribution and the return of such content to terminals with limited resources, including mobile terminals, are thus difficult to implement. One of the aims of the invention is to remedy the shortcomings / disadvantages of the state of the art and / or to make improvements thereto. According to a first aspect, the subject of the invention is a method for receiving an immersive video content by a client entity, said video content being coded in the form of a video stream corresponding to a projection on a content plane. video, said method comprising the following steps implemented by the client entity: a step of obtaining an observation field associated with the client entity; a step of determining a first part of the plane as a function of the observation field obtained and at least one piece of information relating to a restitution spatial capacity of the client entity; a step of sending to at least one distribution entity a distribution request relating to said first part of the plan; a step of receiving at least one elementary video stream associated with said determined first part from said distribution entity, the video stream being previously spatially segmented into a plurality of elementary video streams associated with areas of the plane; the video content being rendered to the client entity from the at least one received elementary video stream associated with the first part of the plan. The invention originates from problems related to the distribution of immersive video content to a terminal with limited resources, such as a mobile terminal accessing the content via a radio access network. However, the invention is equally applicable to any type of client entity or access network.
Ainsi, grâce à l'invention, le volume des données transmises à l'entité cliente est adapté à la capacité spatiale de restitution de l'entité cliente et est donc inférieur à celui transmis pour le flux vidéo dans son ensemble. En effet, seuls les flux vidéo élémentaires associés à la première partie déterminée sont transmis à l'entité cliente. De plus, la capacité de traitement de l'entité cliente consommée pour le décodage du flux vidéo se trouve nettement diminuée en raison de la diminution sensible du volume de données reçu. Ceci permet de mettre en oeuvre une distribution de contenus vidéo de type immersif pour des terminaux aux ressources limitées. Les ressources du réseau ou des réseaux support de la transmission des données sont également économisées. Les différents modes ou caractéristiques de réalisation mentionnés ci-après peuvent être ajoutés indépendamment ou en combinaison les uns avec les autres, aux étapes du procédé de réception tel défini précédemment. Selon une caractéristique particulière, le procédé comprend en outre : - une étape de détermination d'une deuxième partie du plan contigüe à la première partie ; - une étape d'envoi à une entité de distribution d'une requête de distribution de ladite deuxième partie du plan ; - une étape de réception d'au moins un fichier vidéo élémentaire associé à ladite deuxième partie en provenance de ladite entité de distribution. La réception des flux vidéo élémentaires relatifs à la deuxième partie permet ainsi à l'entité cliente de disposer d'un ensemble de flux élémentaires, lui permettant d'améliorer la restitution du flux vidéo en anticipant les modifications éventuelles. Thus, thanks to the invention, the volume of data transmitted to the client entity is adapted to the spatial rendering capacity of the client entity and is therefore less than that transmitted for the video stream as a whole. Indeed, only the elementary video streams associated with the determined first part are transmitted to the client entity. In addition, the processing capacity of the client entity consumed for the decoding of the video stream is significantly reduced due to the significant decrease in the volume of data received. This makes it possible to implement an immersive video content distribution for terminals with limited resources. The resources of the network or networks supporting the transmission of data are also saved. The various embodiments or features mentioned below may be added independently or in combination with each other, to the steps of the reception method as defined above. According to a particular characteristic, the method further comprises: a step of determining a second part of the plane contiguous to the first part; a step of sending to a distribution entity a distribution request of said second part of the plan; a step of receiving at least one elementary video file associated with said second part from said distribution entity. The reception of the elementary video streams relating to the second part thus enables the client entity to have a set of elementary streams, enabling it to improve the rendering of the video stream by anticipating any modifications.
Selon une caractéristique particulière, lorsqu'une modification du champ d'observation est détectée, le contenu vidéo est restitué à partir d'au moins le flux vidéo élémentaire associé à ladite deuxième partie. La réception des flux vidéo élémentaires relatifs à la deuxième partie permet ainsi à l'entité cliente d'adapter la restitution du flux vidéo en fonction des modifications du champ d'observation. L'utilisateur de l'entité cliente dispose ainsi d'une qualité de restitution améliorée, avec des modifications plus fluides. According to a particular characteristic, when a modification of the field of observation is detected, the video content is restored from at least the elementary video stream associated with said second part. The reception of the elementary video streams relating to the second part thus enables the client entity to adapt the restitution of the video stream as a function of the modifications of the field of view. The user of the client entity thus has an improved rendering quality, with more fluid modifications.
Selon une caractéristique particulière, la deuxième partie est déterminée en fonction de modifications successives du champ d'observation. Ceci permet de déterminer la deuxième partie en fonction d'actions de l'utilisateur de l'entité cliente, telles qu'une direction de déplacement, une vitesse de déplacement. According to a particular characteristic, the second part is determined as a function of successive modifications of the field of view. This makes it possible to determine the second part according to actions of the user of the client entity, such as a direction of displacement, a speed of displacement.
Selon une caractéristique particulière, un flux vidéo élémentaire étant codé en une pluralité de sous-flux vidéo élémentaires respectivement encodés à une pluralité de niveaux de qualité, la requête de distribution d'une partie du plan est relative à un sous-flux vidéo élémentaire. Un niveau de qualité est associé à un niveau de codage et ainsi un débit nécessaire à la transmission du flux vidéo. La prise en compte du niveau de qualité permet ainsi de prendre en compte des contraintes au niveau du ou des réseaux support de la transmission des données et/ou des contraintes au niveau de l'entité cliente. Selon une caractéristique particulière, le flux vidéo élémentaire est segmenté temporellement en morceaux de flux. Ceci permet de réagir rapidement à des modifications du champ d'observation. According to one particular characteristic, an elementary video stream being coded in a plurality of elementary video sub-streams respectively encoded at a plurality of quality levels, the request for distribution of part of the plan relates to an elementary video sub-stream. A quality level is associated with a coding level and thus a bit rate necessary for the transmission of the video stream. Taking into account the quality level thus makes it possible to take into account constraints at the level or networks supporting the transmission of data and / or constraints at the level of the client entity. According to a particular characteristic, the elementary video stream is segmented temporally into stream pieces. This makes it possible to react rapidly to changes in the field of view.
Selon un deuxième aspect, l'invention concerne également un équipement formant une entité cliente, agencé pour coopérer avec au moins un équipement formant une entité de distribution pour recevoir un contenu vidéo de type immersif, ledit contenu vidéo étant codé sous la forme d'un flux vidéo correspondant à une projection sur un plan du contenu vidéo et étant préalablement segmenté spatialement en une pluralité de flux vidéo élémentaires associés à des zones du plan, ledit équipement comprenant : - des moyens d'obtention d'un champ d'observation associé à l'entité cliente ; - des moyens de détermination d'une première partie du plan en fonction du champ d'observation obtenu et d' au moins une information relative à une capacité spatiale de restitution de l'entité cliente ; - des moyens d'envoi à une entité de distribution d'une requête de distribution relative à ladite première partie du plan ; - des moyens de réception d'au moins un flux vidéo élémentaire associé à ladite première partie déterminée en provenance de ladite entité de distribution ; - des moyens de restitution du contenu vidéo à partir dudit au moins un flux vidéo élémentaire reçu associé à la première partie du plan. Selon un troisième aspect, l'invention concerne en outre un système de distribution d'un contenu vidéo de type immersif, ledit contenu vidéo étant codé sous la forme d'un flux vidéo correspondant à une projection sur un plan du contenu vidéo et étant préalablement segmenté spatialement en une pluralité de flux vidéo élémentaires associés à des zones du plan, ledit système comprenant un équipement formant une entité cliente selon le deuxième aspect et au moins un équipement formant une entité de distribution, agencée pour recevoir une requête de distribution d' au moins un flux vidéo élémentaire associé à une partie du plan et pour transmettre ledit flux vidéo élémentaire en réponse. Selon une caractéristique particulière, le système de distribution comprend en outre des moyens de segmentation, agencés pour segmenter spatialement le flux vidéo en une pluralité de flux vidéo élémentaires associés à des zones du plan. Selon un quatrième aspect, l'invention concerne un programme pour un équipement comprenant des instructions de code de programme destinées à commander l'exécution des étapes du procédé de réception précédemment décrit, lorsque ledit programme est exécuté par ledit équipement et un support d'enregistrement lisible par un équipement sur lequel est enregistré un programme pour un équipement. L'invention sera mieux comprise à l'aide de la description suivante d'un mode de réalisation particulier du procédé de l'invention, en référence aux dessins annexés sur lesquels : la figure 1 représente un système de distribution de contenus dans son environnement ; la figure 2a représente les étapes du procédé de réception d'un contenu vidéo de type immersif selon un mode particulier de réalisation de l'invention ; la figure 2b représente les étapes du procédé de restitution d'un contenu vidéo de type immersif selon un mode particulier de réalisation de l'invention ; la figure 3 représente une segmentation spatiale d'un flux vidéo associé à un plan selon un mode particulier de réalisation ; la figure 4 représente une entité cliente selon un mode particulier de l'invention ; la figure 5 représente une entité fournisseur de contenus selon un mode particulier de l'invention. La figure 1 représente un système de distribution de contenus 30 permettant à des entités clientes 10, 11 d'accéder à un service de distribution de contenus vidéo de type immersif. On appelle par la suite contenu vidéo de type immersif une vidéo pour laquelle un utilisateur peut visualiser une scène dans son ensemble. L'utilisateur se trouve ainsi immergé dans la scène. Il peut s'agir par exemple d'un contenu vidéo de type sphérique, pour lequel l'utilisateur d'une entité cliente se trouve au centre d'une sphère. Il peut également s'agir d'un contenu vidéo de type cylindrique, dans lequel l'utilisateur de l'entité cliente se trouve dans une position centrale du cylindre. Il peut encore s'agir de contenu vidéo de type panoramique. Un champ d'observation FOV, pour « Field of View » en anglais, permet de définir l'orientation de l'entité cliente et ainsi la partie du contenu vidéo à restituer pour visualisation. Le champ d'observation est défini par exemple par trois angles. Le premier angle correspond à la direction ou « yaw » en anglais. Le deuxième angle correspond au tangage ou « pitch » en anglais. Le troisième angle correspond au roulis ou « roll » en anglais. L'entité cliente 10, 11 est notamment agencée pour obtenir d'un dispositif de pointage une mesure de chacun de ces trois angles. Ce dispositif de pointage peut être un gyroscope, un pointeur ou bien un clavier. Chaque entité cliente 10, 11 accède par l'intermédiaire d'un réseau de communication 1 à des contenus proposés par une entité de distribution de contenus 20. L'entité cliente est par exemple un terminal mobile, apte à afficher des flux vidéo, tel qu'un téléphone dit intelligent ou « smartphone » en anglais. Aucune limitation n'est attachée au nombre d'entités clientes. Une entité fournisseur de contenus 21 prépare le contenu vidéo et le fournit à une ou plusieurs entités de distribution de contenus, dont l'une d'entre elles 20 est représentée sur la figure 1. Le fournisseur de contenus 21 dispose du contenu vidéo de type immersif C sous la forme d'un flux vidéo F, correspondant à une projection sur un plan du contenu vidéo. Un tel contenu vidéo de type immersif intitulé « Cam 360°- Supercross Bercy 2010 » peut par exemple être consulté à l' adresse suivante : « http://orange-sport.orange.fr/sport-360/videos/supercross-bercy- 2010/?dub=1 ». According to a second aspect, the invention also relates to a device forming a client entity, arranged to cooperate with at least one equipment forming a distribution entity to receive an immersive video content, said video content being coded in the form of a video stream corresponding to a projection on a plane of the video content and being previously spatially segmented into a plurality of elementary video streams associated with areas of the plane, said equipment comprising: means for obtaining a field of view associated with the client entity; means for determining a first part of the plane as a function of the observation field obtained and at least one piece of information relating to a spatial rendering capacity of the client entity; means for sending to a distribution entity a distribution request relating to said first part of the plan; means for receiving at least one elementary video stream associated with said determined first part from said distribution entity; means for restoring the video content from said at least one received elementary video stream associated with the first part of the plane. According to a third aspect, the invention furthermore relates to a system for distributing immersive video content, said video content being coded in the form of a video stream corresponding to a projection on a plane of the video content and being previously spatially segmented into a plurality of elementary video streams associated with areas of the plane, said system comprising equipment forming a client entity according to the second aspect and at least one device forming a distribution entity, arranged to receive a distribution request from least one elementary video stream associated with a part of the plane and for transmitting said elementary video stream in response. According to one particular characteristic, the distribution system further comprises segmentation means, arranged to spatially segment the video stream into a plurality of elementary video streams associated with areas of the plane. According to a fourth aspect, the invention relates to a program for an equipment comprising program code instructions for controlling the execution of the steps of the reception method described above, when said program is executed by said equipment and a recording medium readable by equipment on which a program for equipment is recorded. The invention will be better understood with the aid of the following description of a particular embodiment of the method of the invention, with reference to the appended drawings in which: FIG. 1 represents a content distribution system in its environment; FIG. 2a represents the steps of the method of receiving an immersive type video content according to a particular embodiment of the invention; FIG. 2b represents the steps of the method of rendering an immersive type video content according to a particular embodiment of the invention; FIG. 3 represents a spatial segmentation of a video stream associated with a plane according to a particular embodiment; FIG. 4 represents a client entity according to a particular embodiment of the invention; FIG. 5 represents a content provider entity according to a particular embodiment of the invention. FIG. 1 shows a content distribution system 30 enabling client entities 10, 11 to access an immersive type video content distribution service. An immersive video content is then called a video for which a user can view a scene as a whole. The user is thus immersed in the scene. It may be for example a video content of spherical type, for which the user of a client entity is in the center of a sphere. It can also be a cylindrical video content in which the user of the client entity is in a central position of the cylinder. It can still be panoramic video content. An FOV field of view, for "Field of View" in English, makes it possible to define the orientation of the client entity and thus the part of the video content to be rendered for visualization. The field of observation is defined for example by three angles. The first angle is the direction or "yaw" in English. The second angle corresponds to pitching or pitch in English. The third angle is roll or roll in English. The client entity 10, 11 is in particular arranged to obtain from a pointing device a measurement of each of these three angles. This pointing device can be a gyroscope, a pointer or a keyboard. Each client entity 10, 11 accesses via a communication network 1 content proposed by a content distribution entity 20. The client entity is for example a mobile terminal, capable of displaying video streams, such as that a phone says smart or "smartphone" in English. No limitation is attached to the number of client entities. A content provider entity 21 prepares the video content and provides it to one or more content distribution entities, one of which is shown in Fig. 1. The content provider 21 has the video content of type immersive C in the form of a video stream F, corresponding to a projection on a plane of the video content. Such immersive video content entitled "Cam 360 ° - Supercross Bercy 2010" can for example be consulted at the following address: "http://orange-sport.orange.fr/sport-360/videos/supercross-bercy - 2010 /? Dub = 1 ".
Selon l'invention, l'entité fournisseur de contenus 21 segmente ou découpe spatialement le flux vidéo correspondant à la projection sur un plan en une pluralité de flux vidéo élémentaires respectivement associés à des zones du plan. Une projection sur un plan d'un contenu vidéo est représentée sur la figure 3. Pour cet exemple illustratif, le plan a été segmenté en zones de même taille par l'entité fournisseur de contenus 21. Un flux vidéo élémentaire associé à une zone du plan est identifié par ses coordonnées dans le plan selon deux axes. L'axe des abscisses correspond à la valeur de direction (« yaw ») et celui des ordonnées à la valeur de tangage (« pitch »). Dans l'exemple illustré, le champ d'observation se situe au centre de la projection sur le plan. Ainsi, selon l'exemple illustré à la figure 3, le flux vidéo est segmenté en une pluralité de flux vidéos élémentaires F(i,j) où i varie de 0 à 5 et j varie de 0 à 3. Il est ici souligné qu'il s'agit d'un exemple illustratif. Aucune limitation n'est attachée au nombre de zones de segmentation. Une liste descriptive L(F) est associée au contenu vidéo de type immersif et comprend une information relative à la segmentation mise en oeuvre par le fournisseur de contenus 21. Dans un premier mode de réalisation particulier, un flux vidéo élémentaire F(i,j) est segmenté temporellement en morceaux (ou « chunk » selon la terminologie anglophone) de flux vidéo de durée prédéterminée de l'ordre de quelques secondes. A titre d'exemple illustratif, un morceau de flux vidéo correspond à une durée de trois secondes. Le flux vidéo élémentaire est alors composé de morceaux de flux vidéo, notés par exemple F(i,j,k) où k est le numéro du morceau de flux vidéo. L'entité de distribution de contenus 20 mémorise la liste descriptive L(F) associée au contenu vidéo ainsi que les flux vidéos élémentaires segmentés en morceaux de flux dans le premier mode de réalisation. According to the invention, the content provider entity 21 segments or spatially cuts the video stream corresponding to the projection on a plane into a plurality of elementary video streams respectively associated with zones of the plane. A projection on a plane of a video content is shown in FIG. 3. For this illustrative example, the plane has been segmented into zones of the same size by the content provider entity 21. An elementary video stream associated with an area of the plane is identified by its coordinates in the plane along two axes. The x-axis corresponds to the direction value ("yaw") and the ordinate to the pitch value ("pitch"). In the example shown, the field of view is at the center of the projection on the plane. Thus, according to the example illustrated in FIG. 3, the video stream is segmented into a plurality of elementary video streams F (i, j) where i varies from 0 to 5 and j varies from 0 to 3. It is emphasized here that it is an illustrative example. No limitation is attached to the number of segmentation areas. A descriptive list L (F) is associated with the immersive video content and includes information relating to the segmentation implemented by the content provider 21. In a first particular embodiment, an elementary video stream F (i, j ) is segmented temporally into chunks (or "chunk" in the English terminology) of video stream of predetermined duration of the order of a few seconds. As an illustrative example, a piece of video stream corresponds to a duration of three seconds. The elementary video stream is then composed of pieces of video stream, noted for example F (i, j, k) where k is the number of the piece of video stream. The content distribution entity 20 stores the descriptive list L (F) associated with the video content as well as the elementary video streams segmented into stream pieces in the first embodiment.
Dans un deuxième mode de réalisation particulier, un flux vidéo élémentaire F(i,j) est codé en une pluralité de niveaux de qualité m, un codage correspondant à un niveau de qualité m formant un sous-flux vidéo élémentaire F.(i,j). Le flux vidéo élémentaire F(i,j) est alors composé d'un ensemble de sous-flux vidéo élémentaires, notés par exemple F.(i,j). Comme décrit précédemment en relation avec le premier mode de réalisation, le sous-flux vidéo élémentaire peut être segmenté temporellement en morceaux de flux vidéo de durée prédéterminée Le flux vidéo élémentaire est alors composé de sous-flux vidéo élémentaires segmentés en morceaux de flux et notés Fm(i,j,k) où m est le niveau de qualité et k est le numéro du morceau de flux vidéo. L'entité de distribution de contenus 20 mémorise la liste descriptive L(F) associée au contenu vidéo ainsi que les sous-flux vidéos élémentaires respectivement associés à un niveau de qualité et segmentés en morceaux de flux dans le deuxième mode de réalisation. Par souci de simplification, pour les deux modes de réalisations, une seule entité de distribution 20 mémorise la liste descriptive L(F) associée au contenu vidéo et les morceaux de flux vidéo élémentaires ou de sous-flux vidéo élémentaires. Il est ici souligné que la liste descriptive L(F) associée au contenu vidéo peut comprendre des liens vers d'autres entités de distribution disposant d'un ou de plusieurs morceaux des flux vidéo élémentaires. Aucune limitation n'est attachée à la localisation des données dans le réseau. Le procédé de réception d'un contenu vidéo de type immersif C par l'entité cliente 10 va maintenant être décrit en relation avec la figure 2a. In a second particular embodiment, an elementary video stream F (i, j) is coded in a plurality of quality levels m, a coding corresponding to a quality level m forming an elementary video sub-stream F. (i, j). The elementary video stream F (i, j) is then composed of a set of elementary video sub-streams, noted for example F. (i, j). As described above in connection with the first embodiment, the elementary video sub-stream may be segmented temporally into pieces of video stream of predetermined duration. The elementary video stream is then composed of elementary video sub-streams segmented into stream pieces and noted Fm (i, j, k) where m is the quality level and k is the number of the piece of video stream. The content distribution entity 20 stores the descriptive list L (F) associated with the video content as well as the elementary video sub-streams respectively associated with a quality level and segmented into stream pieces in the second embodiment. For the sake of simplification, for both embodiments, a single distribution entity 20 stores the descriptive list L (F) associated with the video content and the elementary video stream or elementary video sub-stream pieces. It is emphasized here that the descriptive list L (F) associated with the video content may include links to other distribution entities having one or more pieces of the elementary video streams. No limitation is attached to the location of the data in the network. The method of receiving immersive video content C by the client entity 10 will now be described in connection with FIG. 2a.
On se place par la suite dans le premier mode de réalisation, correspondant au cas où le contenu vidéo de type immersif est constitué d'une pluralité de flux vidéo élémentaires. Dans une étape El du procédé de réception, l'entité cliente 10 transmet à l'entité de distribution de contenus 20 une requête d'obtention de la liste descriptive L(F) du flux vidéo élémentaire F associé au contenu C. Cette requête est transmise par exemple sous la forme d'une requête conforme au protocole HTTP, pour « HyperText Transfer Protocol ». En retour, l'entité cliente 10 obtient la liste descriptive L(F) associée au contenu vidéo. A partir de la liste descriptive L(F), l'entité cliente 10 obtient notamment l'information relative à la segmentation mise en oeuvre par l'entité fournisseur de contenus 21. Dans une étape E2 du procédé de réception, l'entité cliente 10 initialise des variables de travail à la valeur zéro pour la mise en oeuvre du procédé de réception, notamment une valeur antérieure du champ d'observation FOVF et une variable n identifiant un morceau du flux. Dans une étape E3 du procédé de réception, l'entité cliente 10 obtient à partir du dispositif de pointage une valeur courante du champ d'observation FOV,. Dans une étape E4 du procédé de réception, l'entité cliente 10 vérifie à partir des valeurs antérieure FOVF et courante FOV, du champ d'observation si ce dernier a été modifié. Si tel est le cas, dans une étape E5 du procédé de réception, l'entité cliente 10 détermine une première partie du plan en fonction de l'information relative à la segmentation mise en oeuvre par le fournisseur de contenus 21, du champ d'observation courant FOV, et d'une capacité spatiale de restitution. Une capacité spatiale de restitution correspond par exemple à une taille d'un dispositif d'affichage de l'entité cliente. Le dispositif d'affichage peut être un écran ou bien des lunettes. Pour un écran rectangulaire, on note L sa longueur et 1 sa largeur. La première partie est ainsi déterminée en fonction de la valeur courante FOV, du champ d'observation et de la taille du dispositif d'affichage. En fonction de la segmentation spatiale qui a été réalisée par le fournisseur de contenus 21, cette première partie est identifiée sous la forme d'une liste de flux élémentaires F(i,j,n). A titre d'exemple illustratif, cette première partie est encadrée sur la figure 3 par un trait gras. Les flux vidéo élémentaires F(2,1,n), F(3,1,n), F(2,2,n), F(3,2,n) permettent ainsi de restituer le flux vidéo associé à la première partie. La première partie déterminée dans cet exemple illustratif forme un rectangle. Aucune limitation n'est attachée à cette forme particulière, cette dernière dépendant notamment des contraintes de la capacité spatiale de restitution. Lorsqu'à l'étape E4 l'entité cliente 10 détermine que le champ d'observation n'a pas été modifié, la première partie identifiée n'est pas modifiée et reste inchangée. Next, the first embodiment corresponds to the case where the immersive type video content consists of a plurality of elementary video streams. In a step E1 of the reception method, the client entity 10 transmits to the content distribution entity 20 a request to obtain the descriptive list L (F) of the elementary video stream F associated with the content C. This request is transmitted for example in the form of a request compliant with the HTTP protocol, for "HyperText Transfer Protocol". In return, the client entity 10 obtains the descriptive list L (F) associated with the video content. From the descriptive list L (F), the client entity 10 obtains in particular information relating to the segmentation implemented by the content provider entity 21. In a step E2 of the reception method, the client entity 10 initializes working variables to the value zero for the implementation of the reception method, in particular an earlier value of the observation field FOVF and a variable n identifying a piece of the stream. In a step E3 of the reception method, the client entity 10 obtains from the pointing device a current value of the observation field FOV. In a step E4 of the reception method, the client entity 10 checks from the previous values FOVF and current FOV, the observation field if the latter has been modified. If this is the case, in a step E5 of the reception method, the client entity 10 determines a first part of the plan according to the information relating to the segmentation implemented by the content provider 21, the data field. FOV current observation, and a spatial restitution capability. A spatial reproduction capacity corresponds, for example, to a size of a display device of the client entity. The display device may be a screen or glasses. For a rectangular screen, we denote L its length and 1 its width. The first part is thus determined according to the current value FOV, the field of view and the size of the display device. As a function of the spatial segmentation that has been carried out by the content provider 21, this first part is identified in the form of a list of elementary flows F (i, j, n). As an illustrative example, this first part is framed in Figure 3 by a bold line. The elementary video streams F (2.1, n), F (3.1, n), F (2.2, n), F (3.2, n) thus make it possible to restore the video stream associated with the first part. The first part determined in this illustrative example forms a rectangle. No limitation is attached to this particular form, the latter depending in particular on the constraints of the restitution spatial capacity. When in step E4 the client entity determines that the field of view has not been modified, the identified first part is not modified and remains unchanged.
Dans une étape E7 du procédé de réception, l'entité cliente 10 envoie à l'entité de distribution 20 une requête de distribution du morceau de flux n relative à cette première partie, par exemple sous la forme de requêtes selon le protocole HTTP relatives aux différents flux élémentaires composant la première partie. Dans une étape E8 du procédé de réception, l'entité cliente 10 reçoit les différents morceaux de flux vidéo élémentaires relatifs à la première partie déterminée à l'étape E5. L'entité cliente 10 reçoit ainsi en provenance de l'entité de distribution 20 un ou des flux vidéo élémentaires associés à la première partie déterminée, un flux vidéo élémentaire étant associé à une zone ou segment spatial du flux vidéo correspondant à la projection sur le plan. Le volume des données transmises à l'entité client est ainsi inférieur à celui correspondant au flux vidéo pour tout le plan. In a step E7 of the reception method, the client entity 10 sends to the distribution entity 20 a request for distribution of the piece of stream n relative to this first part, for example in the form of requests according to the HTTP protocol relating to the different elementary streams that make up the first part. In a step E8 of the reception method, the client entity 10 receives the various pieces of elementary video streams relating to the first part determined in step E5. The client entity 10 thus receives from the distribution entity 20 one or more elementary video streams associated with the determined first part, an elementary video stream being associated with a zone or spatial segment of the video stream corresponding to the projection on the plan. The volume of data transmitted to the client entity is thus less than that corresponding to the video stream for the entire plan.
Dans une étape E9 du procédé de réception, l'entité cliente 10 incrémente la variable n identifiant le morceau de flux et vérifie si le flux a été entièrement distribué. Si tel n'est pas le cas, l'entité cliente 10 met de nouveau en oeuvre l'étape E3 du procédé de réception. Dans le cas contraire, le procédé de réception du contenu vidéo C est terminé Conjointement au procédé de réception, pour ce premier mode de réalisation, l'entité cliente 10 met en oeuvre un procédé de restitution d'un contenu vidéo de type immersif, tel que représenté à la figure 2b. Dans une étape Fl du procédé de restitution, l'entité cliente 10 détermine le morceau de flux à restituer et la partie du plan à restituer en fonction du champ d'observation courant FOV,. In a step E9 of the reception method, the client entity 10 increments the variable n identifying the piece of stream and checks whether the stream has been entirely distributed. If this is not the case, the client entity 10 again implements step E3 of the reception method. In the opposite case, the method for receiving the video content C is terminated. In addition to the reception method, for this first embodiment, the client entity 10 implements a method for restoring an immersive type video content, such as as shown in Figure 2b. In a step F1 of the rendering method, the client entity 10 determines the piece of stream to be restored and the part of the plan to be restored according to the current observation field FOV.
Dans une étape F2 du procédé de restitution, l'entité cliente 10 reconstitue le flux vidéo à partir des flux vidéo élémentaires reçus associés à cette partie du plan à restituer, en fonction de l'information relative à la segmentation mise en oeuvre par le fournisseur de contenus 21. Des traitements complémentaires connus de l'état de la technique sont également mis en oeuvre avant visualisation par l'utilisateur de l'entité cliente 10. Il est ici souligné que la capacité de traitement de l'entité cliente affectée au traitement des flux vidéo élémentaires est inférieure à celle nécessaire au traitement du flux vidéo pour tout le plan. In a step F2 of the rendering method, the client entity 10 reconstructs the video stream from the received elementary video streams associated with this part of the plane to be restored, according to the information relating to the segmentation implemented by the provider. of contents 21. Additional treatments known from the state of the art are also implemented before viewing by the user of the client entity 10. It is emphasized here that the processing capacity of the client entity assigned to the processing elementary video streams is less than that required for processing the video stream for the whole plane.
Dans une étape F3 du procédé de restitution, l'entité cliente 10 vérifie si la restitution du contenu vidéo est terminée Si tel n'est pas le cas, l'entité cliente 10 met de nouveau en oeuvre l'étape Fl. Dans le cas contraire, le procédé de restitution est terminé Dans le mode de réalisation décrit, seuls les flux vidéo élémentaires correspondant à une première partie déterminée en fonction de la capacité spatiale de restitution sont transmis. In a step F3 of the rendering method, the client entity 10 checks whether the restitution of the video content is completed. If this is not the case, the client entity 10 again implements the step F1. In the case In contrast, the rendering method is terminated. In the embodiment described, only the elementary video streams corresponding to a first part determined as a function of the restitution spatial capacity are transmitted.
Dans une variante à ce premier mode de réalisation, le procédé de réception comprend en outre une étape E6, consécutive à l'étape E5, au cours de laquelle l'entité cliente 10 détermine une deuxième partie du plan contigüe à la première partie. La deuxième partie peut être par exemple déterminée en fonction de modifications successives du champ d'observation. Ces modifications successives du champ d'observation permettent par exemple de déterminer une vitesse de modification, de déplacement, une direction de déplacement,... La deuxième partie correspond alors à une partie susceptible d'être visualisée prochainement. Dans l'exemple illustratif de la figure 3, lorsque la première partie déterminée lors d'une itération antérieure du procédé de réception correspondait aux flux élémentaires F(2,1,n), F(2,2,n), F(3,1,n), F(3,2,n), alors la deuxième partie comprend les flux élémentaires F(4,2,n), F(3,3,n), F(4,3,n). La deuxième partie peut également correspondre à une partie périphérique de la première partie. Dans l'exemple illustratif de la figure 3, il s'agit par exemple des flux élémentaires F(1,0,n), F(2,0,n), F(3,0,n), F(4,0,n), F(4,1,n), F(4,2,n), F(4,3,n), F(3,3,n), F(2,3,n), F(1,3,n), F(1,2,n), F(1,1,n). In a variant of this first embodiment, the reception method further comprises a step E6, following step E5, during which the client entity 10 determines a second portion of the plane contiguous to the first part. The second part can be for example determined according to successive modifications of the field of view. These successive modifications of the field of observation make it possible, for example, to determine a speed of modification, of displacement, a direction of displacement, etc. The second part then corresponds to a part likely to be visualized shortly. In the illustrative example of FIG. 3, when the first part determined during an earlier iteration of the reception method corresponded to the elementary fluxes F (2.1, n), F (2.2, n), F (3) , 1, n), F (3,2, n), then the second part comprises the elementary flows F (4,2, n), F (3,3, n), F (4,3, n). The second part may also correspond to a peripheral part of the first part. In the illustrative example of FIG. 3, these are, for example, elementary streams F (1.0, n), F (2.0, n), F (3.0, n), F (4, 0, n), F (4.1, n), F (4.2, n), F (4.3, n), F (3.3, n), F (2.3, n), F (1.3, n), F (1.2, n), F (1.1, n).
Dans cette variante, la requête de distribution de la première partie du plan, transmise à l'étape E7 du procédé de réception, porte également une requête de distribution de cette deuxième partie contigüe. Il est également possible de transmettre une ou des requêtes séparées pour cette deuxième partie. Grâce à la réception des flux élémentaires de la deuxième partie, lors de la mise en oeuvre du procédé de distribution, l'entité cliente 10 va alors pouvoir réagir immédiatement à une détection d'une modification du champ d'observation en reconstituant le flux vidéo également à partir d'au moins un flux élémentaire reçu pour la deuxième partie. Dans le deuxième mode de réalisation, on rappelle qu'un flux vidéo élémentaire est codé en une pluralité de niveaux de qualité m, chaque codage à un niveau de qualité formant un sous- flux vidéo élémentaire. Dans ce deuxième mode de réalisation, lors de l'étape E5 du procédé de réception, l'entité cliente 10 détermine également un niveau de qualité pour la réception du flux vidéo. Ce niveau de qualité est par exemple déterminé en fonction d'une capacité de réception de l'entité cliente. La capacité de réception correspond par exemple à une bande passante maximale susceptible d'être acheminée à destination de l'entité cliente. Elle peut également correspondre à une durée de morceaux de flux mémorisés dans une file d'attente en attente de restitution. Lorsque cette durée diminue, la réception de quelques morceaux de flux à un niveau de qualité inférieur peut permettre d'obtenir de nouveau une durée minimale Lors de l'étape E7 du procédé de réception, l'entité cliente 10 demande alors à recevoir les sous-flux vidéo élémentaires encodés au niveau de qualité déterminé A l'étape F2 du procédé de restitution, l'entité cliente 10 reconstitue le flux vidéo à partir des sous-flux vidéo élémentaires reçus associés à cette partie du plan à restituer, en fonction de l'information relative à la segmentation mise en oeuvre par le fournisseur de contenus 21. En première variante à ce deuxième mode de réalisation, de manière équivalente à la variante décrite en relation avec le premier mode de réalisation, l'entité cliente 10 détermine également dans une étape E6 du procédé de réception une deuxième partie contigüe à la première partie et requiert la distribution de cette deuxième partie au niveau de qualité déterminé Le procédé de restitution du flux de vidéo est inchangé. En deuxième variante à ce deuxième mode de réalisation, lors de l'étape E6 du procédé de réception, l'entité cliente 10 détermine en outre un niveau de qualité inférieur pour cette deuxième partie. Ceci permet de ne pas surcharger le réseau de communication avec la transmission des sous-flux élémentaires associés à la deuxième partie et d'améliorer les performances du procédé de restitution. La description a été faite dans des modes de réalisations où une seule entité de distribution 20 mémorise la liste descriptive L(F) associée au contenu vidéo et les morceaux de flux vidéo élémentaires ou de sous-flux vidéo élémentaires. Comme indiqué précédemment, la liste descriptive L(F) associée au contenu vidéo peut comprendre des liens vers d'autres entités de distribution disposant d'un ou de plusieurs morceaux des flux vidéo élémentaires. Dans ce cas, la mise en oeuvre de l'étape d'envoi E7 d'une requête de distribution relative à ladite première partie du plan peut comprendre l'envoi de requêtes de distribution à une pluralité d'entités de distribution, en fonction de la localisation des flux ou sous-flux vidéo élementaires. Dans les modes de réalisation décrits précédemment et leurs variantes, les flux ou sous- flux vidéo élémentaires sont segmentés temporellement en morceaux de flux. Aucune limitation n'est attachée à cette mise en oeuvre particulière. Il est en effet possible de distribuer les flux ou sous-flux vidéo élémentaires sous la forme d'une diffusion en mode continu (ou « streaming » selon la terminologie anglophone). Lorsque l'entité cliente 10 détecte une modification du champ d'observation courant, elle peut alors demander la distribution des nouveaux flux vidéo élémentaires nécessaires et demander l'arrêt de ceux qui ne le sont plus. Dans les modes de réalisation décrits précédemment, l'entité cliente obtient une information relative à la segmentation mise en oeuvre par le fournisseur de contenus 21 à partir de la liste descriptive L(F) associée au contenu vidéo. Aucune limitation n'est attachée à cette mise en oeuvre particulière. L'information relative à la segmentation mise en oeuvre par le fournisseur de contenus 21 peut également être obtenue préalablement par l'entité cliente par d'autres moyens. Un équipement formant une entité cliente 10 va maintenant être décrit en relation avec la figure 4. Un tel équipement comprend notamment : - un module d'émission/réception 102, agencé pour transmettre notamment une requête de distribution relative à une partie du plan et pour recevoir au moins un flux vidéo élémentaire associé à la partie requise ; - un module de restitution 110, agencé pour reconstituer le contenu vidéo à partir d'au moins un flux vidéo élémentaire reçu associé à une partie du plan ; - un module d'affichage 104, agencé notamment pour afficher le contenu vidéo reconstitué ; - un module d'obtention 106 d'un champ d'observation associé à l'entité cliente ; - un module de détermination 108, agencé pour déterminer une première partie du plan en fonction du champ d'observation obtenu et d'au moins une information relative à une capacité spatiale de restitution de l'entité cliente. Le module d'affichage 104 peut correspondre à un écran de l'entité cliente. Il peut également être externe à l'entité cliente, comme des lunettes ou un dispositif annexe de projection. Dans tous les cas, une capacité spatiale de restitution est définie pour ce module d'affichage 104. In this variant, the distribution request of the first part of the plan, transmitted to the step E7 of the reception method, also carries a request for distribution of this second contiguous part. It is also possible to send one or more separate requests for this second part. Thanks to the reception of the elementary streams of the second part, during the implementation of the distribution method, the client entity 10 will then be able to react immediately to a detection of a modification of the field of observation by reconstructing the video stream. also from at least one elementary stream received for the second part. In the second embodiment, it is recalled that an elementary video stream is coded in a plurality of quality levels m, each coding at a quality level forming an elementary video sub-stream. In this second embodiment, during step E5 of the reception method, the client entity 10 also determines a quality level for the reception of the video stream. This level of quality is for example determined according to a reception capacity of the client entity. The reception capacity corresponds for example to a maximum bandwidth likely to be routed to the client entity. It can also correspond to a duration of pieces of stream stored in a queue waiting to be restored. When this duration decreases, the reception of a few pieces of stream at a lower quality level may allow to obtain a minimum duration again. During step E7 of the reception process, the client entity 10 then requests to receive the sub-stations. elementary video streams encoded at the determined quality level In step F2 of the rendering method, the client entity 10 reconstructs the video stream from the received elementary video sub-streams associated with this part of the plane to be restored, as a function of the information relating to the segmentation implemented by the content provider 21. In a first variant to this second embodiment, equivalent to the variant described in relation to the first embodiment, the client entity 10 also determines in a step E6 of the reception method a second portion contiguous to the first part and requires the distribution of this second part at the level of water of determined quality The method of restitution of the video stream is unchanged. In the second variant of this second embodiment, during the step E6 of the reception method, the client entity 10 also determines a lower quality level for this second part. This makes it possible not to overload the communication network with the transmission of the elementary substreams associated with the second part and to improve the performance of the rendering process. The description has been made in embodiments where a single distribution entity 20 stores the descriptive list L (F) associated with the video content and the elementary video stream or elementary video sub-stream pieces. As previously indicated, the descriptive list L (F) associated with the video content may include links to other distribution entities having one or more pieces of the elementary video streams. In this case, the implementation of the sending step E7 of a distribution request relating to said first part of the plan can comprise the sending of distribution requests to a plurality of distribution entities, as a function of the location of elementary video streams or sub-streams. In the previously described embodiments and their variants, the elementary video streams or sub-streams are segmented temporally into stream pieces. No limitation is attached to this particular implementation. It is indeed possible to distribute the elementary video streams or sub-streams in the form of streaming (or "streaming" in English terminology). When the client entity 10 detects a modification of the current observation field, it can then request the distribution of the new elementary video streams necessary and ask for the stopping of those which are no longer necessary. In the embodiments described above, the client entity obtains information relating to the segmentation implemented by the content provider 21 from the descriptive list L (F) associated with the video content. No limitation is attached to this particular implementation. The information relating to the segmentation implemented by the content provider 21 can also be obtained beforehand by the client entity by other means. A device forming a client entity 10 will now be described in relation to FIG. 4. Such an equipment notably comprises: a transmitting / receiving module 102, arranged to transmit in particular a distribution request relating to a part of the plane and to receiving at least one elementary video stream associated with the required portion; a reproduction module 110, arranged to reconstitute the video content from at least one received elementary video stream associated with a part of the plane; a display module 104, arranged in particular for displaying the reconstituted video content; a module 106 for obtaining an observation field associated with the client entity; a determination module 108, arranged to determine a first part of the plane as a function of the observation field obtained and at least one piece of information relating to a restitution spatial capacity of the client entity. The display module 104 may correspond to a screen of the client entity. It can also be external to the client entity, such as glasses or an auxiliary projection device. In all cases, a restitution spatial capacity is defined for this display module 104.
Le module d'obtention 106 est notamment agencé pour obtenir le champ d'observation d'un dispositif de guidage qui peut être interne ou externe. Le module de détermination 108 commande le module d'émission 102, afin que ce dernier demande le ou les flux vidéo élémentaires pour la ou les zones formant la première partie. Dans un mode de réalisation particulier, le module de détermination 108 est en outre agencé pour déterminer une deuxième partie contiguë à la première partie déterminée et pour commander le module d'émission 102 pour obtenir le ou les flux vidéo élémentaires associés à cette deuxième partie. Dans un mode de réalisation particulier, le module de détermination 108 est en outre agencé pour déterminer un niveau de qualité et pour commander le module d'émission 102 pour obtenir le ou les sous-flux vidéo élémentaires associés au niveau de qualité requis. Les modules 104, 106, 108, 110 sont agencés pour mettre en oeuvre le procédé précédemment décrit. Il s'agit de préférence de modules logiciels comprenant des instructions logicielles pour faire exécuter les étapes du procédé de réception précédemment décrit, mises en oeuvre par une entité cliente 10, 11. L'invention concerne donc aussi : - un programme pour une telle entité, comprenant des instructions de code de programme destinées à commander l'exécution des étapes du procédé de réception précédemment décrit, lorsque ledit programme est exécuté par ladite entité cliente ; - un support d'enregistrement lisible par une entité cliente sur lequel est enregistré le programme pour une telle entité cliente. Les modules logiciels peuvent être stockés dans ou transmis par un support de données. Celui-ci peut être un support matériel de stockage, par exemple un CD-ROM, une disquette magnétique ou un disque dur, ou bien un support de transmission tel qu'un signal électrique, optique ou radio, ou un réseau de télécommunication. Un équipement formant une entité fournisseur de contenus 21 va maintenant être décrit en relation avec la figure 5. Un tel équipement 21 comprend notamment : - un module d'émission/réception 202 ; - une zone mémoire 206, agencée pour mémoriser des contenus ; - un module de segmentation 204, agencé pour segmenter spatialement le flux vidéo associé à un contenu vidéo en une pluralité de flux vidéo élémentaires associés à des zones du plan et pour générer une liste descriptive L(F) associée au contenu vidéo ; - une zone mémoire 208, agencée pour mémoriser les flux vidéo élémentaires et la liste descriptive. Le module d'émission 202 est notamment agencé pour distribuer la liste descriptive L(F) et les flux vidéo élémentaires à une ou plusieurs entités de distribution 20. Dans un mode de réalisation particulier, le module de segmentation 204 est également agencé pour coder un flux vidéo élémentaire à différents niveaux de qualité, afin d'obtenir une pluralité de sous-flux vidéo élémentaires. Dans un mode de réalisation particulier, le module de segmentation 204 est en outre agencé pour segmenter temporellement un flux ou un sous-flux vidéo élémentaire en morceaux de flux. L'invention concerne en outre un système de distribution d'un contenu vidéo de type immersif 30, le contenu vidéo étant codé sous la forme d'un flux vidéo correspondant à une projection sur un plan du contenu vidéo et étant préalablement segmenté spatialement en une pluralité de flux vidéo élémentaires associés à des zones du plan. Le système comprend un équipement formant une entité cliente 10, 11 telle que décrite précédemment et au moins un équipement formant une entité de distribution 20, agencée pour recevoir une requête de distribution d' au moins un flux vidéo élémentaire associé à une partie du plan et pour transmettre ledit flux vidéo élémentaire en réponse. Dans un mode de réalisation particulier, le système comprend en outre un module de segmentation 204, agencé pour segmenter spatialement le flux vidéo en une pluralité de flux vidéo élémentaires associés à des zones du plan.35 The obtaining module 106 is in particular arranged to obtain the field of view of a guiding device which may be internal or external. The determination module 108 controls the transmission module 102, so that the latter requests the elementary video stream or streams for the zone or zones forming the first part. In a particular embodiment, the determination module 108 is further arranged to determine a second portion contiguous to the first determined part and to control the transmission module 102 to obtain the elementary video stream or streams associated with this second part. In a particular embodiment, the determination module 108 is further arranged to determine a quality level and to control the transmission module 102 to obtain the elementary video sub-stream (s) associated with the required quality level. The modules 104, 106, 108, 110 are arranged to implement the previously described method. These are preferably software modules comprising software instructions for executing the steps of the reception method previously described, implemented by a client entity 10, 11. The invention therefore also relates to: a program for such an entity , comprising program code instructions for controlling the execution of the steps of the previously described receiving method, when said program is executed by said client entity; a recording medium readable by a client entity on which the program is recorded for such a client entity. The software modules can be stored in or transmitted by a data carrier. This may be a hardware storage medium, for example a CD-ROM, a magnetic diskette or a hard disk, or a transmission medium such as an electrical signal, optical or radio, or a telecommunications network. An equipment forming a content provider entity 21 will now be described in relation with FIG. 5. Such equipment 21 comprises in particular: a transmission / reception module 202; a memory zone 206, arranged to memorize contents; a segmentation module 204, arranged to spatially segment the video stream associated with a video content into a plurality of elementary video streams associated with areas of the plane and to generate a descriptive list L (F) associated with the video content; a memory zone 208, arranged to store the elementary video streams and the descriptive list. The transmission module 202 is in particular arranged to distribute the descriptive list L (F) and the elementary video streams to one or more distribution entities 20. In a particular embodiment, the segmentation module 204 is also arranged to encode a elementary video stream at different levels of quality, in order to obtain a plurality of elementary video sub-streams. In a particular embodiment, the segmentation module 204 is further arranged to temporally segment a stream or an elementary video sub-stream into pieces of stream. The invention further relates to a system for distributing an immersive video content 30, the video content being coded in the form of a video stream corresponding to a projection on a plane of the video content and being previously spatially segmented into a video. plurality of elementary video streams associated with areas of the plane. The system comprises a device forming a client entity 10, 11 as described above and at least one equipment forming a distribution entity 20, arranged to receive a distribution request of at least one elementary video stream associated with a part of the plan and for transmitting said elementary video stream in response. In a particular embodiment, the system further comprises a segmentation module 204, arranged to spatially segment the video stream into a plurality of elementary video streams associated with areas of the plan.
Claims (11)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1252932A FR2988964A1 (en) | 2012-03-30 | 2012-03-30 | Method for receiving immersive video content by client entity i.e. smartphone, involves receiving elementary video stream, and returning video content to smartphone from elementary video stream associated with portion of plan |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1252932A FR2988964A1 (en) | 2012-03-30 | 2012-03-30 | Method for receiving immersive video content by client entity i.e. smartphone, involves receiving elementary video stream, and returning video content to smartphone from elementary video stream associated with portion of plan |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| FR2988964A1 true FR2988964A1 (en) | 2013-10-04 |
Family
ID=46456738
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| FR1252932A Withdrawn FR2988964A1 (en) | 2012-03-30 | 2012-03-30 | Method for receiving immersive video content by client entity i.e. smartphone, involves receiving elementary video stream, and returning video content to smartphone from elementary video stream associated with portion of plan |
Country Status (1)
| Country | Link |
|---|---|
| FR (1) | FR2988964A1 (en) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2016050283A1 (en) * | 2014-09-30 | 2016-04-07 | Telefonaktiebolaget L M Ericsson (Publ) | Reduced bit rate immersive video |
| WO2017202899A1 (en) * | 2016-05-25 | 2017-11-30 | Koninklijke Kpn N.V. | Spatially tiled omnidirectional video streaming |
| EP3149937A4 (en) * | 2014-05-29 | 2018-01-10 | NEXTVR Inc. | Methods and apparatus for delivering content and/or playing back content |
| CN109076262A (en) * | 2016-05-13 | 2018-12-21 | 索尼公司 | File creating apparatus and document generating method and transcriber and reproducting method |
| US10805614B2 (en) | 2016-10-12 | 2020-10-13 | Koninklijke Kpn N.V. | Processing spherical video data on the basis of a region of interest |
| US11336966B2 (en) | 2014-05-29 | 2022-05-17 | Nevermind Capital Llc | Methods and apparatus for delivering content and/or playing back content |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2012007514A1 (en) * | 2010-07-14 | 2012-01-19 | Alcatel Lucent | A method, server and terminal for generating a composite view from multiple content items |
| EP2434772A1 (en) * | 2010-09-22 | 2012-03-28 | Thomson Licensing | Method for navigation in a panoramic scene |
-
2012
- 2012-03-30 FR FR1252932A patent/FR2988964A1/en not_active Withdrawn
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2012007514A1 (en) * | 2010-07-14 | 2012-01-19 | Alcatel Lucent | A method, server and terminal for generating a composite view from multiple content items |
| EP2434772A1 (en) * | 2010-09-22 | 2012-03-28 | Thomson Licensing | Method for navigation in a panoramic scene |
Non-Patent Citations (5)
| Title |
|---|
| "HTTP Live Streaming Overview", INTERNET CITATION, August 2009 (2009-08-01), pages 1 - 7, XP002638991, Retrieved from the Internet <URL:http://www.lifeandstory.org/about/index.php/categoryblog/49-http-live-streaming> [retrieved on 20110524] * |
| ADITYA MAVLANKAR ET AL: "Optimal slice size for streaming regions of high resolution video with virtual pan/tilt/zoom functionality", PROC. OF 15TH EUROPEAN SIGNAL PROCESSING CONFERENCE (EUSIPCO}, 30 September 2007 (2007-09-30), XP055034766, DOI: 10.1.1.75.1021 * |
| RAY VAN BRANDENBURG ET AL: "Spatial segmentation for immersive media delivery", INTELLIGENCE IN NEXT GENERATION NETWORKS (ICIN), 2011 15TH INTERNATIONAL CONFERENCE ON, IEEE, 4 October 2011 (2011-10-04), pages 151 - 156, XP032010052, ISBN: 978-1-61284-319-3, DOI: 10.1109/ICIN.2011.6081064 * |
| S. HEYMANN ET AL: "Representation, Coding and Interactive Rendering of High-Resolution Panoramic Images and Video using MPEG-4", PROC. PANORAMIC PHOTOGRAMMETRY WORKSHOP (PPW), 28 February 2005 (2005-02-28), Berlin, Germany, XP055034771 * |
| THOMAS STOCKHAMMER: "Dynamic Adaptive Streaming over HTTP Design Principles and Standards", 22 January 2011 (2011-01-22), pages 1 - 3, XP007916969, Retrieved from the Internet <URL:http://www.w3.org/2010/11/web-and-tv/papers.html> [retrieved on 20110202] * |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP3149937A4 (en) * | 2014-05-29 | 2018-01-10 | NEXTVR Inc. | Methods and apparatus for delivering content and/or playing back content |
| US11336966B2 (en) | 2014-05-29 | 2022-05-17 | Nevermind Capital Llc | Methods and apparatus for delivering content and/or playing back content |
| US11871085B2 (en) | 2014-05-29 | 2024-01-09 | Nevermind Capital Llc | Methods and apparatus for delivering content and/or playing back content |
| WO2016050283A1 (en) * | 2014-09-30 | 2016-04-07 | Telefonaktiebolaget L M Ericsson (Publ) | Reduced bit rate immersive video |
| CN109076262A (en) * | 2016-05-13 | 2018-12-21 | 索尼公司 | File creating apparatus and document generating method and transcriber and reproducting method |
| CN109076262B (en) * | 2016-05-13 | 2022-07-12 | 索尼公司 | File generation device, file generation method, reproduction device, and reproduction method |
| CN115118952A (en) * | 2016-05-13 | 2022-09-27 | 索尼公司 | Information processing apparatus, information processing method, reproduction apparatus, and reproduction method |
| WO2017202899A1 (en) * | 2016-05-25 | 2017-11-30 | Koninklijke Kpn N.V. | Spatially tiled omnidirectional video streaming |
| CN109565610A (en) * | 2016-05-25 | 2019-04-02 | 皇家Kpn公司 | Omnidirectional's video flowing of space tiling is broadcast |
| US11284124B2 (en) | 2016-05-25 | 2022-03-22 | Koninklijke Kpn N.V. | Spatially tiled omnidirectional video streaming |
| US10805614B2 (en) | 2016-10-12 | 2020-10-13 | Koninklijke Kpn N.V. | Processing spherical video data on the basis of a region of interest |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| FR2988964A1 (en) | Method for receiving immersive video content by client entity i.e. smartphone, involves receiving elementary video stream, and returning video content to smartphone from elementary video stream associated with portion of plan | |
| FR2884027A1 (en) | Digital video images transmitting method for communication network, involves determining spatial zone, in image, corresponding to specified zone based on movement estimated in images sequence, and sending part of data of image of zone | |
| FR2975555A1 (en) | METHOD OF DYNAMIC ADAPTATION OF RECEPTION RATE AND RECEPTOR | |
| WO2016083730A1 (en) | Method for composing an intermediate video representation | |
| EP2947888B1 (en) | Adaptive method for downloading digital content for a plurality of screens | |
| WO2017187044A1 (en) | Method for the contextual composition of an intermediate video representation | |
| FR2959636A1 (en) | Method for accessing spatio-temporal part of video image sequence in e.g. mobile telephone of Internet, involves obtaining selection zone updating information, where information is decoding function of data corresponding to selection zone | |
| EP3625966B1 (en) | Communication process for immersive video | |
| EP3496407A1 (en) | Method for managing the power consumption of an electronic device | |
| EP2680603B1 (en) | Processing technique to provide real-time content to client entities | |
| EP2559218B1 (en) | Reception of a digital content in trick mode | |
| FR3005386A1 (en) | METHOD AND DEVICE FOR PROVIDING A PART ALREADY DIFFUSED FROM A MULTIMEDIA STREAM, USER TERMINAL, CORRESPONDING COMPUTER PROGRAM AND MEDIUM STORAGE MEDIUM | |
| EP2706753B1 (en) | Technique for processing a content distribution request | |
| FR3101503A1 (en) | Management of the adaptive progressive download of digital content over the mobile network with selection of a maximum encoding rate allowed according to a bucket of data | |
| EP3675505B1 (en) | Method and system for distributing audiovisual content | |
| WO2023208688A1 (en) | Management of the rendering of an item of multimedia content | |
| WO2021209706A1 (en) | Management of access to digital content available via progressive and adaptive streaming and encoded using a variable bit rate encoding method, depending on a network load | |
| EP4297409A1 (en) | Method for managing the playback of multimedia content. | |
| FR2976751A1 (en) | METHOD FOR REQUESTING ACCESS BY A TERMINAL TO DIGITAL CONTENT THAT CAN BE DOWNLOADED FROM A NETWORK. | |
| FR3093605A1 (en) | A method of accelerated browsing of digital content obtained by adaptive progressive download (HAS), manager, media player and corresponding computer program. | |
| WO2020030882A2 (en) | 360-degree video streaming method and apparatus | |
| FR3114720A1 (en) | Management of adaptive progressive downloading of content taking into account the quality of the signal exchanged between the client terminal and the network access point | |
| FR3093603A1 (en) | A method of accelerated browsing of digital content obtained by adaptive progressive download (HAS), manager, media player and corresponding computer program. | |
| FR3124344A1 (en) | Method for managing access to content downloaded in adaptive download mode. | |
| FR3111502A1 (en) | Method for managing the reading of digital content within a multimedia content reader terminal connected to a playback device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| ST | Notification of lapse |
Effective date: 20131129 |