WO2020188097A1 - Method for restoring customisation content of a main radio stream - Google Patents

Method for restoring customisation content of a main radio stream Download PDF

Info

Publication number
WO2020188097A1
WO2020188097A1 PCT/EP2020/057823 EP2020057823W WO2020188097A1 WO 2020188097 A1 WO2020188097 A1 WO 2020188097A1 EP 2020057823 W EP2020057823 W EP 2020057823W WO 2020188097 A1 WO2020188097 A1 WO 2020188097A1
Authority
WO
WIPO (PCT)
Prior art keywords
sequence
content
main
stream
duration
Prior art date
Application number
PCT/EP2020/057823
Other languages
French (fr)
Inventor
Franz Cantarano
Original Assignee
Continental Automotive Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Continental Automotive Gmbh filed Critical Continental Automotive Gmbh
Publication of WO2020188097A1 publication Critical patent/WO2020188097A1/en

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/10—Arrangements for replacing or switching information during the broadcast or the distribution
    • H04H20/106—Receiver-side switching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/40—Arrangements for broadcast specially adapted for accumulation-type receivers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/214—Specialised server platform, e.g. server located in an airplane, hotel, hospital
    • H04N21/2146—Specialised server platform, e.g. server located in an airplane, hotel, hospital located in mass transportation means, e.g. aircraft, train or bus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/814—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts comprising emergency warnings
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/04—Time compression or expansion
    • G10L21/055—Time compression or expansion for synchronising with other signals, e.g. video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35—Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H04H60/38—Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for identifying broadcast time or space
    • H04H60/40—Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for identifying broadcast time or space for identifying broadcast time

Definitions

  • TITLE Process for restoring personalization content of a main radio stream
  • the invention belongs to the field of radio broadcasting. It relates in particular to a method making it possible to determine an optimal instant at which to restore personalization audio content, such as a traffic bulletin, when listening to a radio audio stream.
  • voice assistants are known that allow users to receive contextual information, such as a geolocated weather forecast, or even connected navigation systems that allow the driver of a vehicle to receive information relating to traffic conditions.
  • voice assistants communicate with the user via an audio channel, for example by synthesis vocal.
  • the system interrupts the playback of the audio stream, restores the information message, then restores the playback of the stream.
  • Such systems are, for example, used in vehicles to give guidance information or deliver traffic bulletins, or in connected speakers equipped with a voice assistance function.
  • the interruption may consist of a decrease in the volume of the main flow, the stopping of its return, or its suspension followed by a deferred resumption.
  • the message is thus delivered when it is available, without taking into account the programming of the flow. main.
  • the sudden interruption of the main stream to reproduce such a message can be unpleasant, in particular because it arbitrarily deprives the user of part of the information being broadcast on the main stream, but also because it distorts the stream being broadcast. The user experience is therefore not optimal.
  • a method for synchronizing at least one personalization audio content with a main audio stream being broadcast, the main audio stream comprising a plurality of consecutive sequences.
  • the method is remarkable in that it is implemented by a device comprising a memory and a processor configured by instructions stored in the memory and adapted for:
  • synchronization of a personalization content with a main audio stream is meant the fact of making correspond an instant of reproduction of the personalization content with a particular instant of the main audio stream.
  • the invention is based on the identification of a particular sequence in the main flow which can be substituted by the personalization content without the user experience being affected. For this, the sequence is identified from characteristics of the personalization content, in particular from its duration and its importance.
  • Such a layout improves the user experience, because personalized content is rendered in accordance with the structure of the main stream.
  • rendering personalized content does not interrupt the flow being rendered arbitrarily.
  • the content is adapted and synchronized with the main stream so as to be rendered at a favorable location in the main stream.
  • the method implements a step of adapting the personalization content, so that its duration coincides with the duration of a sequence identified in the main stream.
  • At least one sequence selected in the main stream is selected from among a plurality of consecutive sequences of the main stream included in a particular time window.
  • the personalized content is synchronized with a sequence of the main stream selected in a predetermined time window from a current broadcast instant. Such a provision guarantees that the personalization content will be returned within a controlled time, and that its return will not be unduly delayed.
  • the method is such that the time window is determined according to a priority associated with the personalization content.
  • the method makes it possible to increase the duration of the search time window when a priority associated with the personalization content is low. Such a provision helps to improve the quality of stream returned, by increasing the probability of finding a duration sequence compatible with the duration of the personalization content. Conversely, the duration of the search time window will be reduced when the personalization content has priority, so that it is returned without delay.
  • the method is such that the step of selecting at least one sequence of the main flow comprises:
  • the method proposes to synchronize the personalized content with a sequence of the main stream selected so as to minimize the difference in duration between the selected sequence and the personalization content.
  • a minimum difference in duration facilitates the adaptation step.
  • the method is such that the temporal adaptation is carried out according to a "time stretching" technique, well known to those skilled in the art.
  • Time stretching allows you to modify the duration of an audio sequence without altering its timbre or tone.
  • the method can, for example, make it possible to restore personalization content of longer duration than the sequence identified in the main stream without truncating it.
  • the method makes it possible to make the start and end of the personalization content coincide with the start and the end of the sequence, but also the end. The user experience is thus improved.
  • an additional sequence is defined by combining at least two consecutive sequences of the main stream.
  • At least two consecutive sequences of the main stream can be considered as a single composite additional sequence the duration of which corresponds to the sum of the durations of the combined sequences.
  • the number and characteristics of sequences that can be selected from the main stream to synchronize particular personalized content is thus increased.
  • an additional sequence is defined between a first and a second consecutive sequence of the main stream, the additional sequence comprising at least the end of the first sequence and the start of the second sequence.
  • the method thus defines an additional “virtual” sequence between two consecutive sequences of the main stream described in the descriptor. Such additional sequence spans the end of a sequence and the start of a sequence following the first sequence.
  • the process thus makes it possible to insert personalization content of short duration between two sequences of the main flow.
  • the invention relates to a device for synchronizing at least one personalization content with a main audio stream being broadcast, the main audio stream comprising a plurality of juxtaposed sequences, the device comprising:
  • a communication module suitable for obtaining a description of the main audio stream, comprising at least for each sequence making up the main stream, a time indication of the start of playback of said sequence,
  • a selection module suitable for selecting at least one sequence of the main stream according to at least one duration and one priority associated with the personalization content
  • a communication module configured to transmit the synchronized personalization content to at least one rendering device.
  • the invention also relates to a server comprising a synchronization device as described above.
  • the invention also relates to a rendering terminal comprising such a synchronization device.
  • the invention relates to an information medium comprising computer program instructions configured to implement the steps of a synchronization method as described above, when the instructions are executed by a processor.
  • the information medium can be a non-transitory information medium such as a hard disk, a flash memory, or an optical disk for example.
  • the information carrier can be any entity or device capable of storing instructions.
  • the medium can comprise a storage means, such as a ROM, RAM, PROM, EPROM, a CD ROM or else a magnetic recording means, for example a hard disk.
  • the information medium can be a transmissible medium such as an electrical or optical signal, which can be conveyed via an electrical or optical cable, by radio or by other means.
  • the information medium can be an integrated circuit in which the program is incorporated, the circuit being adapted to execute or to be used in the execution of the method in question.
  • the various aforementioned embodiments or characteristics can be added independently or in combination with each other, to the steps of the synchronization method.
  • the servers, terminals and devices present at least advantages similar to those conferred by the method to which they relate.
  • FIG. 1 represents an architecture suitable for implementing the synchronization method according to a particular embodiment.
  • FIG. 2 illustrates the main steps of the synchronization method according to a particular embodiment
  • FIG. 3 illustrates an audio stream and a descriptor of the sequences composing the audio stream, according to a particular embodiment
  • FIG. 4 schematically represents a device suitable for implementing the synchronization method according to a particular embodiment.
  • FIG. 1 represents a broadcasting server 100 in a communication network 101.
  • the server 100 broadcasts an audio stream 102 intended for at least one audio reproduction device 103.
  • the server is for example a radio server broadcasting a radio program predefined.
  • the playback device is for example a radio receiver of a vehicle, a connected speaker or even a mobile terminal of the smartphone type.
  • the figure also shows a server 104 of a communication network 105.
  • the server 104 is adapted to generate personalized audio contents intended for the user of the receiver 103.
  • the server 104 can produce audio contents 106 and 107. comprising for example traffic information, a weather report or any kind of contextual or non-contextual information.
  • the audio contents 106 and 107 are personalized audio sequences intended to be played back to the user of the receiver 103.
  • FIG. 1 also shows a synchronization device 110.
  • the device 110 implements the synchronization method according to a particular embodiment to produce adapted contents 106 'and 107' from personalized contents 106 and 107 and synchronize them with the main stream 102 according to at least one characteristic of the stream. main 102 and / or at least one respective characteristic of the contents of personalizations 106 and 107.
  • the networks 101 and 105 are separate, but they can be one and the same network without the invention needing to be modified.
  • the servers 100 and 104 can be one and the same server.
  • the receiver 103 receives the main audio stream 102 broadcast by the server 100.
  • the receiver comprises a communication interface allowing it to exchange messages with other equipment, and in particular to receive an audio stream broadcast by a server.
  • This communication interface is for example a 3G, 4G or 5G communication interface, or a WiFi or WiMax interface, but it can also be an FM radio receiver suitable for receiving an analog audio stream, or even an RNT (Digital Terrestrial Radio) receiver.
  • the main audio stream is a digital audio stream compressed according to an appropriate coding format and broadcast by the server according to a continuous downloading technique (“streaming” in English).
  • the main audio stream 102 is composed of a plurality of juxtaposed audio sequences corresponding, for example, to musical parts, commercials, sound wrapping sequences or even news bulletins. Thus, all the receivers connected to this stream receive the same succession of audio sequences, according to a predetermined radio programming.
  • the device 110 receives, during a step 200, a description 108 of the main stream 102.
  • the device 110 comprises a communication interface allowing it to exchange messages with other equipment, and in particular to receive the description 108 of the main stream 102 broadcast by the server 100.
  • This communication interface is for example a 3G, 4G or 5G communication interface, or a WiFi or WiMax interface, but it can also be an interface wired communication, such as an Ethernet network interface or any other suitable communication means.
  • the interface can be a local communication bus or a shared memory manager.
  • Description 108 includes in particular time indications relating to the various sequences making up the main stream.
  • the description includes a start time stamp of each of the sequences making up the stream, and / or the duration of each of the sequences.
  • the time stamps relate to a reference date such as the restitution date of the first sequence of the stream or any other desirable date.
  • the description is transmitted in the form of an XML file comprising at least time stamps corresponding to the instants of broadcasting of the various sequences of the main stream.
  • This is for example a playlist, such as a "playlist", or an electronic program guide (EPG, for Electronic Program Guide).
  • EPG Electronic Program Guide
  • FIG. 3 represents an example 108 of a descriptor of the audio stream 102.
  • the audio stream 102 is composed of sequences of different durations 301 to 308 juxtaposed.
  • the descriptor 108 comprises, for each sequence of the audio stream 102, a TS time stamp corresponding to the location of the sequence in the main stream and a duration LEN in minutes of the sequence.
  • the main stream sequences are listed in the descriptor in the order of their broadcast.
  • the composition of a stream can be deduced from the duration and the order of the sequences making up the audio stream.
  • the order of broadcasting of the sequences can be deduced from the TS time stamps, or from the order in which the sequences are listed in the descriptor.
  • the duration of a sequence can be given in any desirable format, such as for example in minutes, in seconds, or even in number of audio samples composing the sequence.
  • the device 110 receives personalized contents 106 and 107 coming from the server 104.
  • the contents 106 and 107 are for example personalized traffic bulletins intended for the user of the receiver 103 and encoded. according to a suitable coding format.
  • the contents 106 and 107 received can be temporarily stored in a buffer memory of the device 110 while waiting to be processed, for example in a RAM memory or a hard disk.
  • the device 110 analyzes the personalized contents 106 and 107 in order to select, according to a particular selection criterion, at least one sequence of the flow 102 included in a particular time window.
  • the device selects personalized content to be processed from among the contents 106 and 107 stored in the buffer memory according to the duration and a priority associated with each personalized content.
  • the personalized content 107 is associated with a higher priority than the personalized content 106.
  • the device 110 first processes the personalized content 107.
  • the device 110 determines the duration of the personalized content 107 and searches in the stream 102 for an optimal location for this content 107.
  • the device consults the header of the downloaded audio content 107 in order to extract its content. duration.
  • the device 110 compares, over a predetermined search time window, the duration of the personalized content 107 with the duration of each sequence of the main stream 102 to be played during the time window. For example, when the time window is set at ten minutes, the device 110 compares the duration of the personalized content with the duration of the sequences making up the main stream to be played in the ten minutes which follow the reception of the personalization content 107.
  • the duration of the time window is determined according to a priority associated with personalized content.
  • a priority corresponds for example to a level of importance of the content.
  • the device 110 obtains the priority of a content from the server 104, or from a specific header included in the sequence 107.
  • the search time window is lengthened, thus making it possible to postpone the restitution to ensure better integration of the content in the stream 102.
  • these time windows can be shifted in. time in order to restore the corresponding personalization contents over the desired time ranges, which may be different.
  • the device 110 selects the sequence of the main stream 102 for which the difference in duration calculated in absolute value is the smallest. In other words, the device 110 selects, over a determined time window, the sequence of the main stream 102, the duration of which is closest to the duration of the personalization content 107.
  • device 110 selects at least one new sequence of main flow 102 according to second personalization content 106.
  • the second sequence of main flow is selected in a time window. search associated with the personalization content 106, the second sequence of the main flow being distinct from the sequence already selected for the personalization content 107.
  • the receiver performs a time adaptation of the personalization contents 106 and 107 so that their respective duration corresponds to the duration of the sequences respectively selected in the main stream.
  • the adaptation comprises the implementation of an algorithm of the “time stretch” type making it possible to increase or reduce the duration of an audio content without altering its tone.
  • the adaptation consists in not modifying the personalization content.
  • the adaptation can consist of adding a sound dressing before the start and / or after the end of the content of customization so that its duration matches exactly the duration of the selected sequence in the main stream.
  • FIG. 3 represents a main audio stream 102 composed of juxtaposed sequences 301 to 308, and a descriptor 108 comprising, for each sequence of the stream main 102, a TS time stamp corresponding to the location of the sequence in the main stream and a duration LEN in minutes of the sequence.
  • FIG. 3 also shows a personalization content 107 whose duration is for example two minutes and associated with a high priority, and a second personalization content 106 with a duration of eight minutes, associated with a low priority.
  • the priority of the content 107 being higher than the priority associated with the content 106, the content 107 is processed first. In this way, a sequence for the priority content can be selected from a larger number of sequences of the main stream.
  • Step 202 thus consists in comparing the duration of the content 107 with the duration of each of the sequences 301, 302, 303 of the main stream 102 included in the time window T1, the time window T1 being determined, according to a particular embodiment, according to the associated priority of the content 107.
  • the differences in duration are preferably calculated in absolute value.
  • the differences in duration between the content 107 and the sequences 301, 302 and 303 are respectively five minutes, one minute and eleven minutes.
  • the sequence of the main stream whose duration shows the least difference with the duration of the personalization content 107 is the sequence 302. It is therefore selected by the receiver during step 203 and associated with the personalization content 107.
  • a sequence of the main stream is then selected according to the personalization content 106, over a time window T2.
  • the priority of the content 106 being low, the window T2 is longer than the window temporal T 1.
  • at least one sequence of the main stream 102 is searched for among the sequences included in the window T2, excluding the sequence already selected according to the priority content 107, that is to say among the sequences 301, 303, 304, 305, 306 and 307.
  • the sequence 301 is the one which has the least difference in duration with the content 106. However, this two-minute difference may be considered too great to allow a suitable adaptation of the personalization content. 106.
  • the method comprises a step according to which, for each sequence of the main stream included in the predetermined time window , a difference is calculated between the duration of the personalization content and the duration of the considered sequence combined with at least one following sequence.
  • the selected sequence corresponds to a composite sequence obtained by combining at least two consecutive sequences.
  • the S threshold corresponds to a difference in duration from which adaptation of the secondary sequence is no longer possible without affecting the user experience.
  • the threshold can be set in a predetermined manner or, more advantageously, be set according to the duration of the personalization content and / or according to the adaptation technique envisaged.
  • the threshold can be set at 40% of the duration of the personalization content.
  • the time window T2 30 minutes and the content 106 of 8 minutes duration represented in FIG. 3.
  • the threshold is set at 40% of the duration of the personalization content 106, ie 96 seconds.
  • the duration of the content 106 is compared with the duration of each of the sequences 301, 303, 304, 305, 306 and 307 included in the time window T2 of the stream 102.
  • the first sequence of the audio stream 102 whose difference is the smallest with the duration of sequence 106 is sequence 301.
  • the difference in duration between sequence 106 and sequence 301 is two minutes.
  • the difference in duration of sequences 106 and 301 is greater than the threshold S.
  • the device 110 calculates a difference between the duration of the content 106 and the duration of each of the sequences of the main stream 102 combined with the consecutive sequence (except the sequence already selected for sequence 107).
  • the cumulative duration of the sequences 305 and 306 has a zero difference with the duration of the content 106.
  • the device 110 selects in step 202 a composite sequence corresponding to a combination of the sequences 305 and 306.
  • the method can assess the duration of more than two consecutive sequences if the difference between the duration of combined sequences and personalization content is still greater than a threshold.
  • new sequences are defined in the main stream 102 from the descriptor 108.
  • a new sequence can be defined between two consecutive sequences.
  • an additional sequence of a few seconds can be defined between the sequence 301 and 302 of the stream 102 shown in FIG. 1.
  • This new sequence comprises for example the last 3 seconds of sequence 301 and the first 4 seconds of sequence 302.
  • a new location is available for inserting personalized content of very short duration.
  • certain sequences of the main stream are identified as not being able to be substituted by a personalization content.
  • the descriptor 108 can contain information relating to the content of the broadcast sequences.
  • the server 104 may further include a profile of the user of the receiver 103 in which, for example, the user's particular musical tastes and / or interests are informed.
  • the sequences of the main stream that may be of particular interest to the user are not selected.
  • this content 107 is stretched by a “time stretching” process so that its duration is equal to the duration of the sequence 302. This adaptation allows to obtain a suitable sequence 107 ', the duration of which coincides with the duration of the sequence selected in the main stream.
  • the duration of content 106 is equal to the duration of sequences 305 and 306, adaptation is not necessary.
  • the adapted content 106 ’ is identical to the sequence 106.
  • the adapted personalized contents 106 ’and 107’ are synchronized with the sequences [305, 306] and 302 respectively selected in the main stream. Synchronization includes associating suitable personalized content with synchronization data, such as a timestamp associated with the start of the selected sequence in the main stream, in order to render the personalized content suitable for when the selected sequence of the main stream must be returned.
  • suitable personalized content such as a timestamp associated with the start of the selected sequence in the main stream, in order to render the personalized content suitable for when the selected sequence of the main stream must be returned.
  • the adapted personalization content 107 ′ is associated with the restitution instant 1006 of the sequence 302.
  • the personalization content 106 ′ is associated with the stamp 1022 corresponding to the instant of restitution of the sequence 305.
  • These synchronization data are for example associated with the adapted contents 106 'and 107' by means of an XML descriptor in which the time stamps determined in association with an identifier of the contents 106 'and 107 are entered. 'to which they relate.
  • the device 110 transmits to the receiver 103 the adapted and synchronized personalization content 106 'and 107' with a view to their reproduction synchronized with the main stream 102.
  • the transmission of an adapted and synchronized personalization content to a receiver includes the transmission of synchronization data allowing the receiver to render the content at a particular time.
  • These synchronization data can for example be interlaced directly in the stream, if it is a webradio type stream, for example by using the option of inserting metadata provided for in most encoding and coding standards. audio broadcast.
  • the receiver 103 On receipt of suitable and synchronized content, the receiver 103 records it in a buffer memory and continues to play back the main stream 102.
  • the receiver decodes a frame or an audio sample of the stream 102, it compares the time stamp associated with it with the synchronization datum associated with the stored content. When the timestamps match, the receiver 103 plays the audio samples of the stored personalization content in place of the audio samples of the main stream. The samples of the corresponding main audio stream are then ignored by the receiver. After having restored the last audio sample of the personalized content, the receiver 103 resumes playing the main stream. In this way, the user of the receiver 103 perceives a stream 102 'reproduced by a loudspeaker 109 of the receiver 103 in which the personalized contents are integrated transparently, while preserving the structure of the broadcast stream 102.
  • the device 110 continuously transmits to the receiver 103 a personalization stream sharing the same time reference with the main stream and comprising at least one adapted personalization content, the adapted content being inserted into the secondary stream to an instant coinciding with the instant of restitution of the selected sequence in the main stream, the secondary stream being transmitted to a restitution terminal with a view to its simultaneous restitution with the main stream.
  • FIG. 4 represents the architecture of a synchronization device according to a particular embodiment.
  • the device comprises a storage space 402, for example a memory MEM, a processing unit 401 equipped for example with a processor PROC.
  • the processing unit can be controlled by a program 403, for example a PGR computer program, implementing the synchronization method as described in the invention with reference to Figures 1 to 3, and in particular the steps of:
  • the instructions of the computer program 403 are for example loaded into a RAM (Random Access Memory) before being executed by the processor of the processing unit 401.
  • the processor of the processing unit 401 implements the steps of the synchronization method according to the instructions of the computer program 403.
  • the device 400 comprises, in addition to the memory 402, communication means 404 (COM) allowing the device to connect to a telecommunications network and to exchange data with other devices via the communication network.
  • telecommunications and in particular to receive a descriptor of a main audio stream broadcast by a broadcasting server, as well as a description of the audio sequences making up the main stream.
  • These means of communication are for example a wireless network interface, allowing the device to connect to a cellular access network of 3G, 4G or 5G type, or another WiFi or WiMax interface.
  • the communication interface is driven by computer program instructions stored in memory 402.
  • the communication interface 404 is further configured to allow the device to download personalization audio content from a server.
  • the device 400 also comprises a selection module 405 (SEL) adapted to select, from the descriptor of the main stream and the personalization content, a sequence of the main stream included in a time window such that the selection minimizes the difference in time between the secondary sequence and the sequence selected in the main stream.
  • the selection module is for example implemented by computer program instructions recorded in the memory 402 and configured, when they are executed by the processor 401, to compare the duration of the secondary sequence with the description of each sequence. of the main stream included in a predetermined time window in order to determine the sequence of the main stream with which the difference in duration is minimal.
  • the device 400 also includes an adaptation module 406.
  • the adaptation module implements a time-stretching type algorithm aimed at increasing or reducing the duration of an audio sequence without modifying its tone.
  • the adaptation module modifies the duration of the personalization content received so that it coincides with the sequence selected in the main stream by the selection module 405.
  • the device 400 also comprises a synchronization module 407 adapted to associate a content adapted by the module 406 to a playback instant corresponding to the playback instant of the sequence selected in the main stream by the selection module 405.
  • the module 407 is implemented by computer program instructions stored in memory 402 and configured, when executed by processor 401, to obtain from the descriptor of the main stream and of the selected sequence, a time stamp corresponding to the instant of restitution of the first audio sample of the selected sequence, and to associate this stamp temporal with adapted content in order to allow synchronized reproduction of the main stream and the adapted personalized content.
  • the device's communication interface 404 is further configured to transmit tailored personalization content and synchronization data to a receiver.
  • the device 400 is integrated into a server, such as the server 104 of FIG. 1.
  • the device 400 is integrated into a terminal, such as a car radio, a connected speaker, a voice assistant or a smartphone.
  • a terminal such as a car radio, a connected speaker, a voice assistant or a smartphone.
  • the device 400 then further comprises a mixing module adapted to mix the main stream and the adapted and synchronized personalization content, according to the time stamp associated with the adapted content, and a reproduction module adapted to convert the mixed audio sequence into a analog signal in order to reproduce it via a loudspeaker.
  • a mixing module adapted to mix the main stream and the adapted and synchronized personalization content, according to the time stamp associated with the adapted content
  • a reproduction module adapted to convert the mixed audio sequence into a analog signal in order to reproduce it via a loudspeaker.
  • the mixing module is implemented by computer program instructions configured to reduce the volume of each audio sample of the main stream whose timestamp corresponds to a timestamp of the personalization content adapted to produce an audio stream mixed in which the adapted personalization content replaces, when it is restored, the sequence selected by the selection module.
  • the main stream is an audiovisual sequence comprising an audio component and a video component
  • the personalization content being an audiovisual sequence also comprising an audio component and a video component.

Abstract

The invention relates to a method for synchronising at least one item of customisation audio content with a main audio stream during broadcasting, the main audio stream comprising a plurality of consecutive sequences, the method being such that it comprises steps of obtaining a description of the main audio stream, comprising at least, for each sequence forming the main stream, a temporal indication of the start of the restoration of said sequence, selecting at least one sequence of the main stream according to at least one duration and one priority associated with the customisation content, matching the customisation content with a feature of the at least one selected sequence, synchronising the matched customisation content with the at least one selected sequence, and transmitting the matched and synchronised customisation content to at least one restoration terminal.

Description

DESCRIPTION DESCRIPTION
TITRE : Procédé de restitution de contenus de personnalisation d’un flux radiophonique principal TITLE: Process for restoring personalization content of a main radio stream
Domaine technique Technical area
L’invention appartient au domaine de la diffusion radiophonique. Elle concerne en particulier un procédé permettant de déterminer un instant optimal auquel restituer un contenu audio de personnalisation, tel qu’un bulletin d’info-trafic, lors de l’écoute d’un flux audio radiophonique. The invention belongs to the field of radio broadcasting. It relates in particular to a method making it possible to determine an optimal instant at which to restore personalization audio content, such as a traffic bulletin, when listening to a radio audio stream.
Technique antérieure Prior art
Le développement d’internet et des objets connectés s’accompagne d’une diversité de nouveaux services offerts aux utilisateurs. En particulier, les services d’information et d’assistance connaissent un fort développement, et notamment les services d’information et d’assistance contextuels. On connaît par exemple des assistants vocaux permettant aux utilisateurs de recevoir de l’information contextuelle, comme par exemple un bulletin météo géolocalisé, ou encore des systèmes de navigation connectés permettant au conducteur d’un véhicule de recevoir des informations relatives aux conditions de circulation. Dans le but d’améliorer l’expérience utilisateur, et pour ne pas détourner l’utilisateur d’une tâche qu’il est en train d’effectuer, de tels services communiquent avec l’utilisateur via un canal audio, par exemple par synthèse vocale. The development of the Internet and connected objects is accompanied by a variety of new services offered to users. In particular, information and assistance services are experiencing strong development, and in particular contextual information and assistance services. For example, voice assistants are known that allow users to receive contextual information, such as a geolocated weather forecast, or even connected navigation systems that allow the driver of a vehicle to receive information relating to traffic conditions. In order to improve the user experience, and so as not to distract the user from a task he is performing, such services communicate with the user via an audio channel, for example by synthesis vocal.
De manière classique, lorsqu’un flux audio est déjà en cours de diffusion et qu’une information contextuelle doit être délivrée, le système interrompt la lecture du flux audio, restitue le message d’information, puis rétablit la lecture du flux. De tels systèmes sont par exemple mis en oeuvre dans les véhicules pour donner des informations de guidage ou délivrer des bulletins d’info-trafic, ou dans les enceintes connectées dotées d’une fonction d’assistance vocale. L’interruption peut consister en une baisse du volume du flux principal, l’arrêt de sa restitution, ou bien sa suspension suivie d’une reprise différée. Le message est ainsi délivré au moment où il est disponible, sans tenir compte de la programmation du flux principal. L’interruption soudaine du flux principal pour restituer un tel message peut être désagréable, notamment par ce qu’elle prive arbitrairement l’utilisateur d’une partie de l’information en cours de diffusion sur le flux principal, mais aussi parce qu’elle dénature le flux en cours de diffusion. L’expérience utilisateur n’est donc pas optimale. Conventionally, when an audio stream is already being broadcast and contextual information must be delivered, the system interrupts the playback of the audio stream, restores the information message, then restores the playback of the stream. Such systems are, for example, used in vehicles to give guidance information or deliver traffic bulletins, or in connected speakers equipped with a voice assistance function. The interruption may consist of a decrease in the volume of the main flow, the stopping of its return, or its suspension followed by a deferred resumption. The message is thus delivered when it is available, without taking into account the programming of the flow. main. The sudden interruption of the main stream to reproduce such a message can be unpleasant, in particular because it arbitrarily deprives the user of part of the information being broadcast on the main stream, but also because it distorts the stream being broadcast. The user experience is therefore not optimal.
Ainsi, il existe un besoin pour une technique de restitution d’un contenu personnalisé qui ne présente pas les inconvénients précités. Thus, there is a need for a technique for rendering personalized content which does not have the aforementioned drawbacks.
Résumé de l’invention Summary of the invention
A cet effet, il est proposé un procédé de synchronisation d’au moins un contenu audio de personnalisation avec un flux audio principal en cours de diffusion, le flux audio principal comportant une pluralité de séquences consécutives. To this end, a method is proposed for synchronizing at least one personalization audio content with a main audio stream being broadcast, the main audio stream comprising a plurality of consecutive sequences.
Le procédé est remarquable en ce qu’il est mis en œuvre par un dispositif comprenant une mémoire et un processeur configuré par des instructions stockées dans la mémoire et adaptées pour : The method is remarkable in that it is implemented by a device comprising a memory and a processor configured by instructions stored in the memory and adapted for:
- Obtenir une description du flux audio principal, comprenant au moins pour chaque séquence composant le flux principal, une indication temporelle de début de restitution de ladite séquence, - Obtain a description of the main audio stream, comprising at least for each sequence making up the main stream, a time indication of the start of playback of said sequence,
- Sélectionner au moins une séquence du flux principal selon au moins une durée et une priorité associées au contenu de personnalisation à restituer, - Select at least one sequence of the main flow according to at least one duration and one priority associated with the personalization content to be rendered,
- Adapter le contenu de personnalisation selon une caractéristique de la au moins une séquence sélectionnée, - Adapt the personalization content according to a characteristic of the at least one selected sequence,
- Synchroniser le contenu de personnalisation adapté avec la au moins une séquence sélectionnée, et - Synchronize the adapted personalization content with the at least one selected sequence, and
- Transmettre le contenu de personnalisation adapté et synchronisé vers au moins un terminal de restitution. - Transmit the adapted and synchronized personalization content to at least one rendering terminal.
On entend par synchronisation d’un contenu de personnalisation avec un flux audio principal le fait de faire correspondre un instant de restitution du contenu de personnalisation avec un instant particulier du flux audio principal. Il s’agit en particulier d’associer au contenu de personnalisation une indication temporelle de restitution basée sur une référence temporelle issue du flux principal. L’invention repose sur l’identification d’une séquence particulière dans le flux principal qui puisse être substituée par le contenu de personnalisation sans que l’expérience utilisateur n’en soit affectée. Pour cela, la séquence est identifiée à partir de caractéristiques du contenu de personnalisation, notamment à partir de sa durée et de son importance. By synchronization of a personalization content with a main audio stream is meant the fact of making correspond an instant of reproduction of the personalization content with a particular instant of the main audio stream. This involves in particular associating with the personalization content a temporal indication of restitution based on a temporal reference originating from the main stream. The invention is based on the identification of a particular sequence in the main flow which can be substituted by the personalization content without the user experience being affected. For this, the sequence is identified from characteristics of the personalization content, in particular from its duration and its importance.
Une telle disposition améliore l’expérience utilisateur, car le contenu personnalisé est restitué en accord avec la structure du flux principal. Ainsi, la restitution d’un contenu personnalisé n’interrompt pas le flux en cours de restitution de façon arbitraire. Au contraire, le contenu est adapté et synchronisé avec le flux principal de façon à être restitué à un emplacement favorable dans le flux principal. Such a layout improves the user experience, because personalized content is rendered in accordance with the structure of the main stream. Thus, rendering personalized content does not interrupt the flow being rendered arbitrarily. On the contrary, the content is adapted and synchronized with the main stream so as to be rendered at a favorable location in the main stream.
Parce qu’il est peu probable qu’une séquence de durée exactement égale à la durée du contenu de personnalisation soit trouvée dans le flux principal, le procédé met en oeuvre une étape d’adaptation du contenu de personnalisation, de façon à ce que sa durée coïncide avec la durée d’une séquence identifiée dans le flux principal. Because it is unlikely that a sequence of duration exactly equal to the duration of the personalization content is found in the main stream, the method implements a step of adapting the personalization content, so that its duration coincides with the duration of a sequence identified in the main stream.
Selon un mode de réalisation particulier, au moins une séquence sélectionnée dans le flux principal est sélectionnée parmi une pluralité de séquences consécutives du flux principal comprises dans une fenêtre temporelle particulière. According to a particular embodiment, at least one sequence selected in the main stream is selected from among a plurality of consecutive sequences of the main stream included in a particular time window.
Le contenu personnalisé est synchronisé avec une séquence du flux principal sélectionnée dans une fenêtre temporelle prédéterminée à compter d’un instant de diffusion courant. Une telle disposition garantie que le contenu de personnalisation sera restitué dans un délai maîtrisé, et que sa restitution ne sera pas exagérément différée. The personalized content is synchronized with a sequence of the main stream selected in a predetermined time window from a current broadcast instant. Such a provision guarantees that the personalization content will be returned within a controlled time, and that its return will not be unduly delayed.
Selon un mode particulier de réalisation, le procédé est tel que la fenêtre temporelle est déterminée selon une priorité associée au contenu de personnalisation. According to a particular embodiment, the method is such that the time window is determined according to a priority associated with the personalization content.
Plus la fenêtre temporelle dans laquelle est recherchée une séquence est grande, plus la probabilité de trouver une séquence dont la durée correspond au contenu de personnalisation est importante. Ainsi, le procédé permet d’augmenter la durée de la fenêtre temporelle de recherche lorsqu’une priorité associée au contenu de personnalisation est faible. Une telle disposition contribue à améliorer la qualité du flux restitué, en augmentant la probabilité de trouver une séquence de durée compatible avec la durée du contenu de personnalisation. A l’inverse, la durée de la fenêtre temporelle de recherche sera réduite lorsque le contenu de personnalisation a un caractère prioritaire, de façon à ce qu’il soit restitué sans tarder. The greater the time window in which a sequence is searched for, the greater the probability of finding a sequence whose duration corresponds to the personalization content. Thus, the method makes it possible to increase the duration of the search time window when a priority associated with the personalization content is low. Such a provision helps to improve the quality of stream returned, by increasing the probability of finding a duration sequence compatible with the duration of the personalization content. Conversely, the duration of the search time window will be reduced when the personalization content has priority, so that it is returned without delay.
Selon une réalisation particulière, le procédé est tel que l’étape de sélection d’au moins une séquence du flux principal comprend : According to a particular embodiment, the method is such that the step of selecting at least one sequence of the main flow comprises:
- Pour chaque séquence du flux principal comprise dans la fenêtre temporelle, calcul d’une différence entre la durée de la séquence considérée et la durée du contenu de personnalisation, - For each sequence of the main flow included in the time window, calculation of a difference between the duration of the considered sequence and the duration of the personalization content,
- Sélection de la séquence du flux principal pour laquelle la différence calculée est la plus faible. - Selection of the main flow sequence for which the calculated difference is the smallest.
L’adaptation étant susceptible d’altérer la qualité du contenu de personnalisation, le procédé propose de synchroniser le contenu personnalisé avec une séquence du flux principal sélectionnée de façon à minimiser l’écart de durée entre la séquence sélectionnée et le contenu de personnalisation. Une différence de durée minimale permet de faciliter l’étape d’adaptation. Since the adaptation is likely to alter the quality of the personalization content, the method proposes to synchronize the personalized content with a sequence of the main stream selected so as to minimize the difference in duration between the selected sequence and the personalization content. A minimum difference in duration facilitates the adaptation step.
Selon un mode de réalisation particulier, le procédé est tel que l’adaptation temporelle est réalisée selon une technique de « time stretching », bien connue de l’homme de l’art. According to a particular embodiment, the method is such that the temporal adaptation is carried out according to a "time stretching" technique, well known to those skilled in the art.
Le time stretching permet de modifier la durée d’une séquence audio sans en altérer le timbre ou la tonalité. Ainsi, en adaptant le contenu de personnalisation de cette manière, il est possible de faire coïncider parfaitement un contenu de personnalisation avec une séquence particulière du flux principal. Le procédé peut par exemple permettre de restituer un contenu de personnalisation de durée supérieure à séquence identifiée dans le flux principal sans la tronquer. A l’inverse, lorsque le contenu de personnalisation est de durée inférieure à une séquence identifiée dans le flux principal, le procédé permet de faire coïncider le début et la fin du contenu de personnalisation avec le début et la fin de la séquence, mais aussi la fin. L’expérience utilisateur est ainsi améliorée. Selon un mode particulier de réalisation, une séquence additionnelle est définie par combinaison d’au moins deux séquences consécutives du flux principal. Time stretching allows you to modify the duration of an audio sequence without altering its timbre or tone. Thus, by adapting the personalization content in this way, it is possible to perfectly match personalization content with a particular sequence of the main flow. The method can, for example, make it possible to restore personalization content of longer duration than the sequence identified in the main stream without truncating it. Conversely, when the personalization content is of shorter duration than a sequence identified in the main stream, the method makes it possible to make the start and end of the personalization content coincide with the start and the end of the sequence, but also the end. The user experience is thus improved. According to a particular embodiment, an additional sequence is defined by combining at least two consecutive sequences of the main stream.
Ainsi, au moins deux séquences consécutives du flux principal peuvent être considérées comme une unique séquence additionnelle composite dont la durée correspond au cumul des durées des séquences combinées. Le nombre et les caractéristiques des séquences susceptibles d’être sélectionnées dans le flux principal pour synchroniser un contenu personnalisé particulier est ainsi augmenté. Thus, at least two consecutive sequences of the main stream can be considered as a single composite additional sequence the duration of which corresponds to the sum of the durations of the combined sequences. The number and characteristics of sequences that can be selected from the main stream to synchronize particular personalized content is thus increased.
De cette façon, lorsque la durée du contenu de personnalisation est nettement supérieure à la durée de la séquence du flux principal la plus longue dans la fenêtre temporelle considérée, il est proposé de rechercher dans la fenêtre temporelle une combinaison de séquences consécutives dont la durée cumulée s’approche le plus de la durée du contenu de personnalisation. Une telle disposition permet d’éviter d’avoir à adapter de manière trop important le contenu de personnalisation, ce qui conduirait à une restitution de qualité médiocre. In this way, when the duration of the personalization content is clearly greater than the duration of the longest main stream sequence in the time window considered, it is proposed to search in the time window for a combination of consecutive sequences whose cumulative duration Closest to the duration of personalization content. Such an arrangement makes it possible to avoid having to adapt the personalization content too significantly, which would lead to poor quality reproduction.
Selon un mode particulier de réalisation, une séquence additionnelle est définie entre une première et une deuxième séquences consécutives du flux principal, la séquence additionnelle comprenant au moins la fin de la première séquence et le début de la deuxième séquence. According to a particular embodiment, an additional sequence is defined between a first and a second consecutive sequence of the main stream, the additional sequence comprising at least the end of the first sequence and the start of the second sequence.
Le procédé défini ainsi une séquence « virtuelle » additionnelle entre deux séquences consécutives du flux principal décrites dans le descripteur. Une telle séquence additionnelle s’étale sur la fin d'une séquence et le début d’une séquence consécutive à la première séquence. Le procédé permet ainsi d’insérer un contenu de personnalisation de courte durée entre deux séquences du flux principal. The method thus defines an additional “virtual” sequence between two consecutive sequences of the main stream described in the descriptor. Such additional sequence spans the end of a sequence and the start of a sequence following the first sequence. The process thus makes it possible to insert personalization content of short duration between two sequences of the main flow.
Selon un autre aspect, l’invention concerne un dispositif de synchronisation d’au moins un contenu de personnalisation avec un flux audio principal en cours de diffusion, le flux audio principal comportant une pluralité de séquences juxtaposées, le dispositif comprenant: According to another aspect, the invention relates to a device for synchronizing at least one personalization content with a main audio stream being broadcast, the main audio stream comprising a plurality of juxtaposed sequences, the device comprising:
- Un module de communication adapté pour obtenir une description du flux audio principal, comprenant au moins pour chaque séquence composant le flux principal, une indication temporelle de début de restitution de ladite séquence, - A communication module suitable for obtaining a description of the main audio stream, comprising at least for each sequence making up the main stream, a time indication of the start of playback of said sequence,
- Un module de sélection, adapté pour sélectionner au moins une séquence du flux principal selon au moins une durée et une priorité associées au contenu de personnalisation, - A selection module, suitable for selecting at least one sequence of the main stream according to at least one duration and one priority associated with the personalization content,
- Un module d’adaptation du contenu de personnalisation selon la au moins une séquence sélectionnée, - A module for adapting the personalization content according to the at least one selected sequence,
- Un module de synchronisation du contenu de personnalisation adapté et synchronisé avec la au moins une séquence sélectionnée, et - A module for synchronizing the personalization content adapted and synchronized with the at least one selected sequence, and
- Un module de communication configuré pour transmettre le contenu de personnalisation synchronisé vers au moins un dispositif de restitution. - A communication module configured to transmit the synchronized personalization content to at least one rendering device.
L’invention concerne aussi un serveur comprenant un dispositif de synchronisation tel que décrit ci-avant. The invention also relates to a server comprising a synchronization device as described above.
L’invention concerne encore un terminal de restitution comprenant un tel dispositif de synchronisation. The invention also relates to a rendering terminal comprising such a synchronization device.
Selon encore un autre aspect, l’invention concerne un support d’information comportant des instructions de programme d’ordinateur configurées pour mettre en œuvre les étapes d’un procédé de synchronisation tel que décrit précédemment, lorsque les instructions sont exécutées par un processeur. According to yet another aspect, the invention relates to an information medium comprising computer program instructions configured to implement the steps of a synchronization method as described above, when the instructions are executed by a processor.
Le support d'information peut être un support d'information non transitoire tel qu'un disque dur, une mémoire flash, ou un disque optique par exemple. The information medium can be a non-transitory information medium such as a hard disk, a flash memory, or an optical disk for example.
Le support d'informations peut être n'importe quelle entité ou dispositif capable de stocker des instructions. Par exemple, le support peut comporter un moyen de stockage, tel qu'une ROM, RAM, PROM, EPROM, un CD ROM ou encore un moyen d'enregistrement magnétique, par exemple un disque dur. The information carrier can be any entity or device capable of storing instructions. For example, the medium can comprise a storage means, such as a ROM, RAM, PROM, EPROM, a CD ROM or else a magnetic recording means, for example a hard disk.
D'autre part, le support d'informations peut être un support transmissible tel qu'un signal électrique ou optique, qui peut être acheminé via un câble électrique ou optique, par radio ou par d'autres moyens. On the other hand, the information medium can be a transmissible medium such as an electrical or optical signal, which can be conveyed via an electrical or optical cable, by radio or by other means.
Alternativement, le support d'informations peut être un circuit intégré dans lequel le programme est incorporé, le circuit étant adapté pour exécuter ou pour être utilisé dans l'exécution du procédé en question. Les différents modes ou caractéristiques de réalisation précités peuvent être ajoutés indépendamment ou en combinaison les uns avec les autres, aux étapes du procédé de synchronisation. Les serveurs, terminaux et dispositifs présentent au moins des avantages analogues à ceux conférés par le procédé auquel ils se rapportent. Alternatively, the information medium can be an integrated circuit in which the program is incorporated, the circuit being adapted to execute or to be used in the execution of the method in question. The various aforementioned embodiments or characteristics can be added independently or in combination with each other, to the steps of the synchronization method. The servers, terminals and devices present at least advantages similar to those conferred by the method to which they relate.
Brève description des dessins Brief description of the drawings
[Fig. 1 ] La figure 1 représente une architecture adaptée pour mettre en œuvre le procédé de synchronisation selon un mode de réalisation particulier. [Fig. 1] FIG. 1 represents an architecture suitable for implementing the synchronization method according to a particular embodiment.
[Fig. 2] La figure 2 illustre les principales étapes du procédé de synchronisation selon une réalisation particulière, [Fig. 2] FIG. 2 illustrates the main steps of the synchronization method according to a particular embodiment,
[Fig. 3] La figure 3 illustre un flux audio et un descripteur des séquences composant le flux audio, selon un mode particulier de réalisation, et [Fig. 3] FIG. 3 illustrates an audio stream and a descriptor of the sequences composing the audio stream, according to a particular embodiment, and
[Fig. 4] La figure 4 représente de manière schématique un dispositif adapté pour mettre en œuvre le procédé de synchronisation selon une réalisation particulière. [Fig. 4] FIG. 4 schematically represents a device suitable for implementing the synchronization method according to a particular embodiment.
Description détaillée de l’invention Detailed description of the invention
La figure 1 représente un serveur de diffusion 100 dans un réseau de communication 101. Le serveur 100 diffuse un flux audio 102 à destination d’au moins un dispositif de restitution audio 103. Le serveur est par exemple un serveur de radio diffusant un programme radiophonique prédéfini. Le dispositif de restitution est par exemple un récepteur radio d’un véhicule, une enceinte connectée ou encore un terminal mobile de type smartphone. FIG. 1 represents a broadcasting server 100 in a communication network 101. The server 100 broadcasts an audio stream 102 intended for at least one audio reproduction device 103. The server is for example a radio server broadcasting a radio program predefined. The playback device is for example a radio receiver of a vehicle, a connected speaker or even a mobile terminal of the smartphone type.
La figure montre aussi un serveur 104 d’un réseau de communication 105. Le serveur 104 est adapté pour générer des contenus audio personnalisés à destination de l’utilisateur du récepteur 103. Par exemple, le serveur 104 peut produire des contenus audio 106 et 107 comprenant par exemple des informations d’info-trafic, un bulletin météo ou tout sorte d’information contextuelle ou non. Les contenus audio 106 et 107 sont des séquences audio personnalisées destinées à être restituées à l’utilisateur du récepteur 103. La figure 1 représente également un dispositif 1 10 de synchronisation. Le dispositif 1 10 met en oeuvre le procédé de synchronisation selon un mode de réalisation particulier pour produire des contenus adaptées 106’ et 107’ à partir des contenus personnalisées 106 et 107 et les synchroniser avec le flux principal 102 selon au moins une caractéristique du flux principal 102 et/ou au moins une caractéristique respective des contenus de personnalisations 106 et 107. The figure also shows a server 104 of a communication network 105. The server 104 is adapted to generate personalized audio contents intended for the user of the receiver 103. For example, the server 104 can produce audio contents 106 and 107. comprising for example traffic information, a weather report or any kind of contextual or non-contextual information. The audio contents 106 and 107 are personalized audio sequences intended to be played back to the user of the receiver 103. FIG. 1 also shows a synchronization device 110. The device 110 implements the synchronization method according to a particular embodiment to produce adapted contents 106 'and 107' from personalized contents 106 and 107 and synchronize them with the main stream 102 according to at least one characteristic of the stream. main 102 and / or at least one respective characteristic of the contents of personalizations 106 and 107.
Sur la figure 1 , les réseaux 101 et 105 sont distincts, mais ils peuvent être un seul et même réseau sans que l’invention nécessite d’être modifiée. De même, selon une réalisation particulière, les serveurs 100 et 104 peuvent être un seul et même serveur. In Figure 1, the networks 101 and 105 are separate, but they can be one and the same network without the invention needing to be modified. Likewise, according to a particular embodiment, the servers 100 and 104 can be one and the same server.
Un mode particulier de réalisation du procédé de synchronisation va maintenant être décrit en référence à la figure 2. A particular embodiment of the synchronization method will now be described with reference to FIG. 2.
Le récepteur 103 reçoit le flux audio principal 102 diffusé par le serveur 100. Pour cela, le récepteur comprend une interface de communication lui permettant d’échanger des messages avec d’autres équipements, et en particulier de recevoir un flux audio diffusé par un serveur. Cette interface de communication est par exemple une interface de communication 3G, 4G ou 5G, ou une interface WiFi ou WiMax, mais il peut également s’agir d’un récepteur radio FM adapté pour recevoir un flux audio analogique, ou bien encore d’un récepteur RNT (Radio Numérique Terrestre). Selon un mode particulier de réalisation, le flux audio principal est un flux audio numérique compressé selon un format de codage approprié et diffusé par le serveur selon une technique de téléchargement continu (« streaming » en anglais). The receiver 103 receives the main audio stream 102 broadcast by the server 100. For this, the receiver comprises a communication interface allowing it to exchange messages with other equipment, and in particular to receive an audio stream broadcast by a server. . This communication interface is for example a 3G, 4G or 5G communication interface, or a WiFi or WiMax interface, but it can also be an FM radio receiver suitable for receiving an analog audio stream, or even an RNT (Digital Terrestrial Radio) receiver. According to a particular embodiment, the main audio stream is a digital audio stream compressed according to an appropriate coding format and broadcast by the server according to a continuous downloading technique (“streaming” in English).
Le flux audio principal 102 est composé d’une pluralité de séquences audio juxtaposées correspondant par exemple à parties musicales, des spots publicitaires, des séquences d’habillage sonores ou encore des bulletins d’informations. Ainsi, tous les récepteurs connectés à ce flux reçoivent la même succession de séquences audio, selon une programmation radiophonique prédéterminée. The main audio stream 102 is composed of a plurality of juxtaposed audio sequences corresponding, for example, to musical parts, commercials, sound wrapping sequences or even news bulletins. Thus, all the receivers connected to this stream receive the same succession of audio sequences, according to a predetermined radio programming.
Le dispositif 1 10 reçoit, lors d’une étape 200, une description 108 du flux principal 102. Pour cela, le dispositif 1 10 comprend une interface de communication lui permettant d’échanger des messages avec d’autres équipements, et en particulier de recevoir la description 108 du flux principal 102 diffusé par le serveur 100. Cette interface de communication est par exemple une interface de communication 3G, 4G ou 5G, ou une interface WiFi ou WiMax, mais il peut également s’agir d’une interface de communication filaire, comme par exemple une interface réseau Ethernet ou tout autre moyen de communication adapté. En variante, lorsque les serveurs 100 et 104 et le dispositif 1 10 sont compris dans une même entité, l’interface peut être un bus de communication local ou un gestionnaire de mémoire partagée. The device 110 receives, during a step 200, a description 108 of the main stream 102. For this, the device 110 comprises a communication interface allowing it to exchange messages with other equipment, and in particular to receive the description 108 of the main stream 102 broadcast by the server 100. This communication interface is for example a 3G, 4G or 5G communication interface, or a WiFi or WiMax interface, but it can also be an interface wired communication, such as an Ethernet network interface or any other suitable communication means. As a variant, when the servers 100 and 104 and the device 110 are included in the same entity, the interface can be a local communication bus or a shared memory manager.
La description 108 comprend notamment des indications temporelles relatives aux différentes séquences composant le flux principal. Par exemple, la description comprend une estampille temporelle de début de chacune des séquences composant le flux, et/ou la durée de chacune des séquences. Les estampilles temporelles sont relatives à une date de référence comme la date de restitution de la première séquence du flux ou tout autre date souhaitable. Selon une réalisation particulière, la description est transmise sous la forme d’un fichier XML comportant au moins des estampilles temporelles correspondant aux instants de diffusion des différentes séquences du flux principal. Il s’agit par exemple d’une liste de lecture, telle qu’une « playlist », ou un guide de programme électronique (EPG, pour Electronic Program Guide). Un exemple de descripteur est représenté sur la figure 3. Description 108 includes in particular time indications relating to the various sequences making up the main stream. For example, the description includes a start time stamp of each of the sequences making up the stream, and / or the duration of each of the sequences. The time stamps relate to a reference date such as the restitution date of the first sequence of the stream or any other desirable date. According to a particular embodiment, the description is transmitted in the form of an XML file comprising at least time stamps corresponding to the instants of broadcasting of the various sequences of the main stream. This is for example a playlist, such as a "playlist", or an electronic program guide (EPG, for Electronic Program Guide). An example of a descriptor is shown in Figure 3.
La figure 3 représente un exemple 108 de descripteur du flux audio 102. Le flux audio 102 est composé de séquences de différentes durées 301 à 308 juxtaposées. Le descripteur 108 comprend, pour chaque séquence du flux audio 102, une estampille temporelle TS correspondant à l’emplacement de la séquence dans le flux principal et une durée LEN en minutes de la séquence. Les séquences du flux principal sont listées dans le descripteur dans l’ordre de leur diffusion. En pratique, la composition d’un flux peut être déduite à partir de la durée et de l’ordre des séquences composant le flux audio. L’ordre de diffusion des séquences peut être déduit à partir des estampilles temporelles TS, ou à partir de l’ordre dans lequel les séquences sont listées dans le descripteur. La durée d’une séquence peut être donnée dans n’importe quel format souhaitable, comme par exemple en minutes, en secondes, ou encore en nombre d’échantillon audio composant la séquence. Lors d’une étape 201 , le dispositif 1 10 reçoit des contenus personnalisés 106 et 107 en provenance du serveur 104. Les contenus 106 et 107 sont par exemple des bulletins d’info-trafic personnalisés destinés à l’utilisateur du récepteur 103 et encodés selon un format de codage adapté. Les contenus 106 et 107 reçus peuvent être temporairement enregistrés dans une mémoire tampon du dispositif 1 10 en attendant d’être traités, par exemple dans une mémoire RAM ou un disque dur. FIG. 3 represents an example 108 of a descriptor of the audio stream 102. The audio stream 102 is composed of sequences of different durations 301 to 308 juxtaposed. The descriptor 108 comprises, for each sequence of the audio stream 102, a TS time stamp corresponding to the location of the sequence in the main stream and a duration LEN in minutes of the sequence. The main stream sequences are listed in the descriptor in the order of their broadcast. In practice, the composition of a stream can be deduced from the duration and the order of the sequences making up the audio stream. The order of broadcasting of the sequences can be deduced from the TS time stamps, or from the order in which the sequences are listed in the descriptor. The duration of a sequence can be given in any desirable format, such as for example in minutes, in seconds, or even in number of audio samples composing the sequence. During a step 201, the device 110 receives personalized contents 106 and 107 coming from the server 104. The contents 106 and 107 are for example personalized traffic bulletins intended for the user of the receiver 103 and encoded. according to a suitable coding format. The contents 106 and 107 received can be temporarily stored in a buffer memory of the device 110 while waiting to be processed, for example in a RAM memory or a hard disk.
Lors d’une étape 202, le dispositif 1 10 analyse les contenus personnalisés 106 et 107 pour sélectionner, selon un critère de sélection particulier, au moins une séquence du flux 102 comprise dans une fenêtre temporelle particulière. During a step 202, the device 110 analyzes the personalized contents 106 and 107 in order to select, according to a particular selection criterion, at least one sequence of the flow 102 included in a particular time window.
Selon un mode de réalisation particulier, le dispositif sélectionne un contenu personnalisé à traiter parmi les contenus 106 et 107 mémorisés dans la mémoire tampon selon la durée et une priorité associée à chaque contenu personnalisé. Dans le présent exemple, on considère que le contenu personnalisé 107 est associé à une priorité plus haute que le contenu personnalisé 106. Ainsi, le dispositif 1 10 traite en premier lieu le contenu personnalisé 107. According to a particular embodiment, the device selects personalized content to be processed from among the contents 106 and 107 stored in the buffer memory according to the duration and a priority associated with each personalized content. In the present example, it is considered that the personalized content 107 is associated with a higher priority than the personalized content 106. Thus, the device 110 first processes the personalized content 107.
Pour cela, selon un mode de réalisation particulier, le dispositif 1 10 détermine la durée du contenu personnalisé 107 et recherche dans le flux 102 un emplacement optimal pour ce contenu 107. Le dispositif consulte l’entête du contenu audio 107 téléchargé pour en extraire sa durée. A partir du descripteur 108, le dispositif 1 10 compare, sur une fenêtre temporelle de recherche prédéterminée, la durée du contenu personnalisé 107 avec la durée de chaque séquence du flux principal 102 devant être jouée pendant la fenêtre temporelle. Par exemple, lorsque la fenêtre temporelle est fixée à dix minutes, le dispositif 1 10 compare la durée du contenu personnalisé avec la durée des séquences composant le flux principal devant être jouées dans les dix minutes qui suivent la réception du contenu de personnalisation 107. For this, according to a particular embodiment, the device 110 determines the duration of the personalized content 107 and searches in the stream 102 for an optimal location for this content 107. The device consults the header of the downloaded audio content 107 in order to extract its content. duration. From descriptor 108, the device 110 compares, over a predetermined search time window, the duration of the personalized content 107 with the duration of each sequence of the main stream 102 to be played during the time window. For example, when the time window is set at ten minutes, the device 110 compares the duration of the personalized content with the duration of the sequences making up the main stream to be played in the ten minutes which follow the reception of the personalization content 107.
Selon un mode particulier de réalisation, la durée de la fenêtre temporelle est déterminée selon une priorité associée à un contenu personnalisé. Une telle priorité correspond par exemple à un niveau d’importance du contenu. Le dispositif 1 10 obtient la priorité d’un contenu auprès du serveur 104, ou à partir d’un entête spécifique compris dans la séquence 107. Ainsi, plus le contenu de personnalisation est jugé important, c’est-à-dire plus sa priorité est élevée, plus la fenêtre temporelle dans laquelle est recherché une séquence est réduite. A l’inverse, lorsque le contenu personnalisé est de moindre importance, la fenêtre temporelle de recherche est allongée, permettant ainsi de différer la restitution pour assurer une meilleure intégration du contenu dans le flux 102. Bien entendu, ces fenêtres temporelles peuvent être décalées dans le temps afin de restituer les contenus de personnalisation correspondants sur des plages temporelles désirées, qui peuvent être différentes. According to a particular embodiment, the duration of the time window is determined according to a priority associated with personalized content. Such a priority corresponds for example to a level of importance of the content. The device 110 obtains the priority of a content from the server 104, or from a specific header included in the sequence 107. Thus, the more the content of personalization is considered important, that is to say the higher its priority, the smaller the time window in which a sequence is sought. Conversely, when the personalized content is of less importance, the search time window is lengthened, thus making it possible to postpone the restitution to ensure better integration of the content in the stream 102. Of course, these time windows can be shifted in. time in order to restore the corresponding personalization contents over the desired time ranges, which may be different.
Selon un mode particulier, le dispositif 1 10 sélectionne la séquence du flux principal 102 pour laquelle la différence de durée calculée en valeur absolue, est la plus faible. Autrement dit, le dispositif 1 10 sélectionne, sur une fenêtre temporelle déterminée, la séquence du flux principal 102 dont la durée est la plus proche de la durée du contenu de personnalisation 107. According to a particular embodiment, the device 110 selects the sequence of the main stream 102 for which the difference in duration calculated in absolute value is the smallest. In other words, the device 110 selects, over a determined time window, the sequence of the main stream 102, the duration of which is closest to the duration of the personalization content 107.
Lorsqu’une séquence du flux 102 est sélectionnée selon le contenu de personnalisation 107, le dispositif 1 10 sélectionne au moins une nouvelle séquence du flux principal 102 selon le deuxième contenu de personnalisation 106. La deuxième séquence du flux principal est sélectionnée dans une fenêtre temporelle de recherche associée au contenu de personnalisation 106, la deuxième séquence du flux principal étant distincte de la séquence déjà sélectionnée pour le contenu de personnalisation 107. When a sequence of flow 102 is selected according to personalization content 107, device 110 selects at least one new sequence of main flow 102 according to second personalization content 106. The second sequence of main flow is selected in a time window. search associated with the personalization content 106, the second sequence of the main flow being distinct from the sequence already selected for the personalization content 107.
Lors d’une étape 203, le récepteur procède à une adaptation temporelle des contenus de personnalisation 106 et 107 pour que leur durée respective corresponde à la durée des séquences respectivement sélectionnées dans le flux principal. Selon un mode de réalisation particulier, l’adaptation comprend la mise en oeuvre d’un algorithme de type « time stretch » permettant d’augmenter ou de réduire la durée d’un contenu audio sans en altérer la tonalité. Lorsqu’un contenu de personnalisation et la séquence sélectionnée dans le flux principal ont sensiblement la même durée, l’adaptation consiste à ne pas modifier le contenu de personnalisation. Selon un autre exemple, lorsque qu’un contenu de personnalisation est plus court que la séquence sélectionnée dans le flux principal, l’adaptation peut consister en l’ajout d’un habillage sonore avant le début et/ou après la fin du contenu de personnalisation de manière à ce que sa durée corresponde exactement à la durée de la séquence sélectionnée dans le flux principal. During a step 203, the receiver performs a time adaptation of the personalization contents 106 and 107 so that their respective duration corresponds to the duration of the sequences respectively selected in the main stream. According to a particular embodiment, the adaptation comprises the implementation of an algorithm of the “time stretch” type making it possible to increase or reduce the duration of an audio content without altering its tone. When a personalization content and the sequence selected in the main stream have substantially the same duration, the adaptation consists in not modifying the personalization content. According to another example, when a personalization content is shorter than the sequence selected in the main stream, the adaptation can consist of adding a sound dressing before the start and / or after the end of the content of customization so that its duration matches exactly the duration of the selected sequence in the main stream.
Un exemple de mise en œuvre des étapes 202 et 203 va maintenant être décrit en relation avec la figure 3. La figure 3 représente un flux audio principal 102 composé de séquences 301 à 308 juxtaposées, et un descripteur 108 comprenant, pour chaque séquence du flux principal 102, une estampille temporelle TS correspondant à l’emplacement de la séquence dans le flux principal et une durée LEN en minutes de la séquence. La figure 3 montre aussi une première fenêtre temporelle dont la durée est par exemple T1 = 21 minutes. On constate que les séquences 301 , 302 et 303 sont comprises dans la fenêtre temporelle T1 . An example of the implementation of steps 202 and 203 will now be described in relation to FIG. 3. FIG. 3 represents a main audio stream 102 composed of juxtaposed sequences 301 to 308, and a descriptor 108 comprising, for each sequence of the stream main 102, a TS time stamp corresponding to the location of the sequence in the main stream and a duration LEN in minutes of the sequence. FIG. 3 also shows a first time window, the duration of which is for example T1 = 21 minutes. It can be seen that the sequences 301, 302 and 303 are included in the time window T1.
La figure 3 montre aussi un contenu de personnalisation 107 dont la durée est par exemple de deux minute et associée à une priorité haute, et un deuxième contenu de personnalisation 106 d’une durée de huit minutes, associé à une priorité basse. FIG. 3 also shows a personalization content 107 whose duration is for example two minutes and associated with a high priority, and a second personalization content 106 with a duration of eight minutes, associated with a low priority.
Selon une réalisation particulière, la priorité du contenu 107 étant supérieure à la priorité associée au contenu 106, le contenu 107 est traité en premier lieu. De cette façon, une séquence pour le contenu prioritaire peut être sélectionnée parmi un plus grand nombre de séquences du flux principal. According to a particular embodiment, the priority of the content 107 being higher than the priority associated with the content 106, the content 107 is processed first. In this way, a sequence for the priority content can be selected from a larger number of sequences of the main stream.
L’étape 202 consiste ainsi à comparer la durée du contenu 107 avec la durée de chacune des séquences 301 , 302, 303 du flux principal 102 comprises dans la fenêtre temporelle T1 , la fenêtre temporelle T1 étant déterminée, selon une réalisation particulière, selon la priorité associée du contenu 107. Les différences de durées sont de préférence calculées en valeur absolue. Les différences de durées entre le contenu 107 et les séquences 301 , 302 et 303 sont respectivement de cinq minutes, une minute et onze minutes. Step 202 thus consists in comparing the duration of the content 107 with the duration of each of the sequences 301, 302, 303 of the main stream 102 included in the time window T1, the time window T1 being determined, according to a particular embodiment, according to the associated priority of the content 107. The differences in duration are preferably calculated in absolute value. The differences in duration between the content 107 and the sequences 301, 302 and 303 are respectively five minutes, one minute and eleven minutes.
Ainsi, la séquence du flux principal dont la durée présente le moins d’écart avec la durée du contenu de personnalisation 107 est la séquence 302. Elle est donc sélectionnée par le récepteur lors de l’étape 203 et associée au contenu de personnalisation 107. Thus, the sequence of the main stream whose duration shows the least difference with the duration of the personalization content 107 is the sequence 302. It is therefore selected by the receiver during step 203 and associated with the personalization content 107.
Il est ensuite procédé à la sélection d’une séquence du flux principal selon le contenu de personnalisation 106, sur une fenêtre temporelle T2. La priorité du contenu 106 étant basse, la fenêtre T2 est de durée supérieure à la fenêtre temporelle T 1 . Ainsi, il est recherché au moins une séquence du flux principal 102 parmi les séquences comprises dans la fenêtre T2, en excluant la séquence déjà sélectionnée selon le contenu prioritaire 107, c’est-à-dire parmi les séquences 301 , 303, 304, 305, 306 et 307. Parmi ces séquences, la séquence 301 est celle qui présente le moins d’écart de durée avec le contenu 106. Toutefois, cet écart de deux minutes peut être considéré trop important pour permettre une adaptation convenable du contenu de personnalisation 106. A sequence of the main stream is then selected according to the personalization content 106, over a time window T2. The priority of the content 106 being low, the window T2 is longer than the window temporal T 1. Thus, at least one sequence of the main stream 102 is searched for among the sequences included in the window T2, excluding the sequence already selected according to the priority content 107, that is to say among the sequences 301, 303, 304, 305, 306 and 307. Among these sequences, the sequence 301 is the one which has the least difference in duration with the content 106. However, this two-minute difference may be considered too great to allow a suitable adaptation of the personalization content. 106.
Selon un mode particulier de réalisation, lorsque la différence de durée entre la séquence sélectionnée et le contenu de personnalisation à synchroniser est supérieure à un seuil S, le procédé comporte une étape selon laquelle, pour chaque séquence du flux principal comprise dans la fenêtre temporelle prédéterminée, il est calculé une différence entre la durée du contenu de personnalisation et la durée de la séquence considérée combinée avec au moins une séquence suivante. Ainsi, la séquence sélectionnée correspond à une séquence composite obtenue par combinaison d’au moins deux séquences consécutives. According to a particular embodiment, when the difference in duration between the selected sequence and the personalization content to be synchronized is greater than a threshold S, the method comprises a step according to which, for each sequence of the main stream included in the predetermined time window , a difference is calculated between the duration of the personalization content and the duration of the considered sequence combined with at least one following sequence. Thus, the selected sequence corresponds to a composite sequence obtained by combining at least two consecutive sequences.
Le seuil S correspond à une différence de durée à partir de laquelle l’adaptation de la séquence secondaire n’est plus possible sans affecter l’expérience utilisateur. Le seuil peut être fixé de manière prédéterminée ou bien de façon plus avantageuse, être fixé selon la durée du contenu de personnalisation et/ou selon la technique d’adaptation envisagée. Par exemple, le seuil peut être fixé à 40% de la durée du contenu de personnalisation. Considérons par exemple la fenêtre temporelle T2 = 30 minutes et le contenu 106 de durée 8 minutes représentés sur la figure 3. Le seuil est fixé à 40% de la durée du contenu de personnalisation 106, soit 96 secondes. La durée du contenu 106 est comparée avec la durée de chacune des séquences 301 , 303, 304, 305, 306 et 307 comprises dans la fenêtre temporelle T2 du flux 102. La première séquence du flux audio 102 dont l’écart est le plus faible avec la durée de la séquence 106 est la séquence 301 . La différence de durée entre la séquence 106 et la séquence 301 est de deux minutes. Ainsi, l’écart de durée des séquences 106 et 301 est supérieur au seuil S. The S threshold corresponds to a difference in duration from which adaptation of the secondary sequence is no longer possible without affecting the user experience. The threshold can be set in a predetermined manner or, more advantageously, be set according to the duration of the personalization content and / or according to the adaptation technique envisaged. For example, the threshold can be set at 40% of the duration of the personalization content. Consider for example the time window T2 = 30 minutes and the content 106 of 8 minutes duration represented in FIG. 3. The threshold is set at 40% of the duration of the personalization content 106, ie 96 seconds. The duration of the content 106 is compared with the duration of each of the sequences 301, 303, 304, 305, 306 and 307 included in the time window T2 of the stream 102. The first sequence of the audio stream 102 whose difference is the smallest with the duration of sequence 106 is sequence 301. The difference in duration between sequence 106 and sequence 301 is two minutes. Thus, the difference in duration of sequences 106 and 301 is greater than the threshold S.
En conséquence, le dispositif 1 10 calcule une différence entre la durée du contenu 106 et la durée de chacune des séquences du flux principal 102 combinée avec la séquence consécutive (excepté la séquence déjà sélectionnée pour la séquence 107). Ainsi, la durée du contenu 106 est comparée avec la durée de la séquence 303 additionnée avec la durée de la séquence 304 (12+1 =13 minutes), puis avec la durée de la séquence 304 additionnée avec la durée de la séquence 305 (1 +4=5 minutes), puis avec la durée de la séquence 305 additionnée avec la durée de la séquence 306 (4+4=8 minutes), etc. La durée cumulée des séquences 305 et 306 présente une différence nulle avec la durée du contenu 106. Ainsi, le dispositif 1 10 sélectionne à l’étape 202 une séquence composite correspondant à une combinaison des séquences 305 et 306. Consequently, the device 110 calculates a difference between the duration of the content 106 and the duration of each of the sequences of the main stream 102 combined with the consecutive sequence (except the sequence already selected for sequence 107). Thus, the duration of the content 106 is compared with the duration of the sequence 303 added with the duration of the sequence 304 (12 + 1 = 13 minutes), then with the duration of the sequence 304 added with the duration of the sequence 305 ( 1 + 4 = 5 minutes), then with the duration of sequence 305 added with the duration of sequence 306 (4 + 4 = 8 minutes), etc. The cumulative duration of the sequences 305 and 306 has a zero difference with the duration of the content 106. Thus, the device 110 selects in step 202 a composite sequence corresponding to a combination of the sequences 305 and 306.
En variante, le procédé peut évaluer la durée de plus de deux séquences consécutives si l’écart entre la durée de séquences combinées et d’un contenu de personnalisation est toujours supérieur à un seuil. Alternatively, the method can assess the duration of more than two consecutive sequences if the difference between the duration of combined sequences and personalization content is still greater than a threshold.
Selon un mode particulier de réalisation, de nouvelles séquences sont définies dans le flux principal 102 à partir du descripteur 108. En particulier, une nouvelle séquence peut être définie entre deux séquences consécutives. Ainsi, une séquence additionnelle de quelques secondes peut être définie entre la séquence 301 et 302 du flux 102 représenté sur la figure 1 . Cette nouvelle séquence comprend par exemple les 3 dernières secondes de la séquence 301 et les 4 premières secondes de la séquence 302. Ainsi, un nouvel emplacement est disponible pour insérer un contenu personnalisé de très courte durée. According to a particular embodiment, new sequences are defined in the main stream 102 from the descriptor 108. In particular, a new sequence can be defined between two consecutive sequences. Thus, an additional sequence of a few seconds can be defined between the sequence 301 and 302 of the stream 102 shown in FIG. 1. This new sequence comprises for example the last 3 seconds of sequence 301 and the first 4 seconds of sequence 302. Thus, a new location is available for inserting personalized content of very short duration.
Selon un mode de réalisation particulier, certaines séquences du flux principal sont identifiées comme ne pouvant pas être substituées par un contenu de personnalisation. Par exemple, le descripteur 108 peut contenir des informations relatives au contenu des séquences diffusées. Le serveur 104 peut en outre comprendre un profil de l’utilisateur du récepteur 103 dans lequel sont par exemple renseignés des goûts musicaux et/ou des centres d’intérêts particuliers de l’utilisateur. Ainsi, selon une réalisation particulière, les séquences du flux principal susceptibles de présenter un intérêt particulier pour l’utilisateur ne sont pas sélectionnées. According to a particular embodiment, certain sequences of the main stream are identified as not being able to be substituted by a personalization content. For example, the descriptor 108 can contain information relating to the content of the broadcast sequences. The server 104 may further include a profile of the user of the receiver 103 in which, for example, the user's particular musical tastes and / or interests are informed. Thus, according to a particular embodiment, the sequences of the main stream that may be of particular interest to the user are not selected.
Lorsqu’une séquence 302 du flux principal est sélectionnée selon le contenu 107, ce contenu 107 est étiré par un procédé de « time stretching » de façon à ce que sa durée soit égale à la durée de la séquence 302. Cette adaptation permet d’obtenir une séquence adaptée 107’ dont la durée coïncide avec la durée de la séquence sélectionnée dans le flux principal. When a sequence 302 of the main stream is selected according to the content 107, this content 107 is stretched by a “time stretching” process so that its duration is equal to the duration of the sequence 302. This adaptation allows to obtain a suitable sequence 107 ', the duration of which coincides with the duration of the sequence selected in the main stream.
La durée du contenu 106 étant égale à la durée des séquences 305 et 306, l’adaptation n’est pas nécessaire. Ainsi, le contenu adapté 106’ est identique à la séquence 106. Since the duration of content 106 is equal to the duration of sequences 305 and 306, adaptation is not necessary. Thus, the adapted content 106 ’is identical to the sequence 106.
Lors d’une étape 204, les contenus personnalisés adaptés 106’ et 107’ sont synchronisés avec les séquences [305, 306] et 302 respectivement sélectionnées dans le flux principal. La synchronisation comprend l’association d’un contenu personnalisé adapté avec des données de synchronisation, comme une estampille temporelle associée au début de la séquence sélectionnée dans le flux principal, en vue d’une restitution du contenu personnalisé adapté au moment où la séquence sélectionnée du flux principal doit être restituée. Par exemple, en référence à la figure 3, le contenu de personnalisation adapté 107’, est associée à l’instant de restitution 1006 de la séquence 302. De même, le contenu de personnalisation 106’ est associé avec l’estampille 1022 correspondant à l’instant de restitution de la séquence 305. Ces données de synchronisation sont par exemple associées aux contenus adaptées 106’ et 107’ grâce à un descripteur XML dans lequel sont renseignées les estampilles temporelles déterminées en association avec un identifiant des contenus 106’ et 107’ auxquels elles se rapportent. During a step 204, the adapted personalized contents 106 ’and 107’ are synchronized with the sequences [305, 306] and 302 respectively selected in the main stream. Synchronization includes associating suitable personalized content with synchronization data, such as a timestamp associated with the start of the selected sequence in the main stream, in order to render the personalized content suitable for when the selected sequence of the main stream must be returned. For example, with reference to FIG. 3, the adapted personalization content 107 ′ is associated with the restitution instant 1006 of the sequence 302. Likewise, the personalization content 106 ′ is associated with the stamp 1022 corresponding to the instant of restitution of the sequence 305. These synchronization data are for example associated with the adapted contents 106 'and 107' by means of an XML descriptor in which the time stamps determined in association with an identifier of the contents 106 'and 107 are entered. 'to which they relate.
Lors d’une étape 205, le dispositif 1 10 transmet au récepteur 103 les contenus de personnalisation adaptés et synchronisés 106’ et 107’ en vue de leur restitution synchronisée avec le flux principal 102. La transmission d’un contenu de personnalisation adapté et synchronisé à un récepteur comprend la transmission de données de synchronisation permettant au récepteur de restituer le contenu à un instant particulier. Ces données de synchronisation peuvent par exemple être entrelacées directement dans le flux, s’il s’agit d’un flux de type webradio, en utilisant par exemple la faculté d’insertion de métadonnées prévue dans la plupart des normes d’encodage et de diffusion audio. During a step 205, the device 110 transmits to the receiver 103 the adapted and synchronized personalization content 106 'and 107' with a view to their reproduction synchronized with the main stream 102. The transmission of an adapted and synchronized personalization content to a receiver includes the transmission of synchronization data allowing the receiver to render the content at a particular time. These synchronization data can for example be interlaced directly in the stream, if it is a webradio type stream, for example by using the option of inserting metadata provided for in most encoding and coding standards. audio broadcast.
A la réception d’un contenu adapté et synchronisé, le récepteur 103 l’enregistre dans une mémoire tampon et poursuit la restitution du flux principal 102. Lorsque le récepteur décode une trame ou un échantillon audio du flux 102, il compare l’estampille temporelle qui lui est associée avec la donnée de synchronisation associée au contenu mémorisé. Lorsque les estampilles coïncident, le récepteur 103 restitue les échantillons audio du contenu de personnalisation mémorisé à la place des échantillons audio du flux principal. Les échantillons du flux audio principal correspondant sont alors ignorés par le récepteur. Après avoir restitué le dernier échantillon audio du contenu personnalisé, le récepteur 103 reprend la lecture du flux principal. De cette façon, l’utilisateur du récepteur 103 perçoit un flux 102’ restitué par un haut-parleur 109 du récepteur 103 dans lequel les contenus personnalisés sont intégrés de manière transparente, en préservant la structure du flux diffusé 102. On receipt of suitable and synchronized content, the receiver 103 records it in a buffer memory and continues to play back the main stream 102. When the receiver decodes a frame or an audio sample of the stream 102, it compares the time stamp associated with it with the synchronization datum associated with the stored content. When the timestamps match, the receiver 103 plays the audio samples of the stored personalization content in place of the audio samples of the main stream. The samples of the corresponding main audio stream are then ignored by the receiver. After having restored the last audio sample of the personalized content, the receiver 103 resumes playing the main stream. In this way, the user of the receiver 103 perceives a stream 102 'reproduced by a loudspeaker 109 of the receiver 103 in which the personalized contents are integrated transparently, while preserving the structure of the broadcast stream 102.
Dans un mode particulier de réalisation, le dispositif 1 10 transmet en continu au récepteur 103 un flux de personnalisation partageant une même référence temporelle avec le flux principal et comprenant au moins un contenu de personnalisation adapté, le contenu adapté étant inséré dans le flux secondaire à un instant coïncidant avec l’instant de restitution de la séquence sélectionnée dans le flux principal, le flux secondaire étant transmis à un terminal de restitution en vue de sa restitution simultanée avec le flux principal. In a particular embodiment, the device 110 continuously transmits to the receiver 103 a personalization stream sharing the same time reference with the main stream and comprising at least one adapted personalization content, the adapted content being inserted into the secondary stream to an instant coinciding with the instant of restitution of the selected sequence in the main stream, the secondary stream being transmitted to a restitution terminal with a view to its simultaneous restitution with the main stream.
Il est ainsi proposé de générer un flux de personnalisation continu comprenant un ou plusieurs contenus de personnalisation. Le flux de personnalisation généré dispose d’une base temporelle commune avec le flux principal, de sorte qu’une séquence associée à une estampille temporelle particulière dans le flux de personnalisation sera restituée au même moment qu’une séquence du flux principal associée à la même estampille. Une telle disposition simplifie les traitements au niveau du récepteur et permet ainsi de d’en réduire le coût : en effet, le flux de personnalisation étant généré par un serveur et transmis en continu de façon synchronisée avec un flux principal, le récepteur peut simplement jouer simultanément les flux reçus, en adaptant le volume du flux principal quand des échantillons audio non nuis sont reçus dans le flux de personnalisation. Les traitements dans le serveur peuvent en outre être mutualisés de façon à ce qu’un même flux de personnalisation généré puisse être transmis à une pluralité d’utilisateurs écoutant le même flux principal. La figure 4 représente l’architecture d’un dispositif de synchronisation selon un mode particulier de réalisation. It is thus proposed to generate a continuous personalization flow comprising one or more personalization contents. The generated personalization flow has a common time base with the main flow, so that a sequence associated with a particular time stamp in the personalization flow will be rendered at the same time as a sequence of the main flow associated with the same. stamp. Such an arrangement simplifies the processing operations at the level of the receiver and thus makes it possible to reduce the cost thereof: in fact, the personalization stream being generated by a server and transmitted continuously in a manner synchronized with a main stream, the receiver can simply play. simultaneously the received streams, adjusting the volume of the main stream when undamaged audio samples are received in the personalization stream. The processing operations in the server can also be shared so that the same generated personalization flow can be transmitted to a plurality of users listening to the same main flow. FIG. 4 represents the architecture of a synchronization device according to a particular embodiment.
Le dispositif comprend un espace de stockage 402, par exemple une mémoire MEM, une unité de traitement 401 équipée par exemple d’un processeur PROC. L’unité de traitement peut être pilotée par un programme 403, par exemple un programme d’ordinateur PGR, mettant en oeuvre le procédé de synchronisation tel que décrit dans l’invention en référence aux figures 1 à 3, et notamment les étapes de : The device comprises a storage space 402, for example a memory MEM, a processing unit 401 equipped for example with a processor PROC. The processing unit can be controlled by a program 403, for example a PGR computer program, implementing the synchronization method as described in the invention with reference to Figures 1 to 3, and in particular the steps of:
- Obtention une description du flux audio principal, comprenant au moins pour chaque séquence composant le flux principal, une indication temporelle de début de restitution de ladite séquence, - Obtaining a description of the main audio stream, comprising at least for each sequence making up the main stream, a time indication of the start of restitution of said sequence,
- Sélection au moins une séquence du flux principal selon au moins une durée et une priorité associées au contenu de personnalisation, - Selection of at least one sequence of the main flow according to at least one duration and one priority associated with the personalization content,
- Adaptation temporelle du contenu de personnalisation selon la au moins une séquence sélectionnée, - Temporal adaptation of the personalization content according to the at least one selected sequence,
- Synchronisation du contenu de personnalisation adapté avec la au moins une séquence sélectionnée, et - Synchronization of the adapted personalization content with the at least one selected sequence, and
- Transmission du contenu de personnalisation adapté et synchronisé vers au moins un terminal de restitution. - Transmission of the adapted and synchronized personalization content to at least one rendering terminal.
À l’initialisation, les instructions du programme d’ordinateur 403 sont par exemple chargées dans une mémoire RAM (Random Access Memory en anglais) avant d’être exécutées par le processeur de l’unité de traitement 401 . Le processeur de l’unité de traitement 401 met en oeuvre les étapes du procédé de synchronisation selon les instructions du programme d’ordinateur 403. On initialization, the instructions of the computer program 403 are for example loaded into a RAM (Random Access Memory) before being executed by the processor of the processing unit 401. The processor of the processing unit 401 implements the steps of the synchronization method according to the instructions of the computer program 403.
Pour cela, le dispositif 400 comprend, outre la mémoire 402, des moyens de communication 404 (COM) permettant au dispositif de se connecter à un réseau de télécommunication et d’échanger des données avec d’autres dispositifs par l’intermédiaire du réseau de télécommunications, et en particulier de recevoir un descripteur d’un flux audio principal diffusé par un serveur de diffusion, ainsi qu’une description des séquences audio composant le flux principal. Ces moyens de communication sont par exemple une interface réseau sans fil, permettant au dispositif de se connecter à un réseau d’accès cellulaire de type 3G, 4G ou 5G, ou encore une interface WiFi ou WiMax. L’interface de communication est pilotée par des instructions de programme d’ordinateur enregistrées dans la mémoire 402. For this, the device 400 comprises, in addition to the memory 402, communication means 404 (COM) allowing the device to connect to a telecommunications network and to exchange data with other devices via the communication network. telecommunications, and in particular to receive a descriptor of a main audio stream broadcast by a broadcasting server, as well as a description of the audio sequences making up the main stream. These means of communication are for example a wireless network interface, allowing the device to connect to a cellular access network of 3G, 4G or 5G type, or another WiFi or WiMax interface. The communication interface is driven by computer program instructions stored in memory 402.
L’interface de communication 404 est en outre configurée pour permettre au dispositif de télécharger un contenu audio de personnalisation à partir d’un serveur. The communication interface 404 is further configured to allow the device to download personalization audio content from a server.
Le dispositif 400 comprend également un module de sélection 405 (SEL) adapté pour sélectionner, à partir du descripteur du flux principal et du contenu de personnalisation, une séquence du flux principal comprise dans une fenêtre temporelle de telle sorte que la sélection minimise la différence de durée entre la séquence secondaire et la séquence sélectionnée dans le flux principal. Le module de sélection est par exemple mis en œuvre par des instructions de programme d’ordinateur enregistrées dans la mémoire 402 et configurées, lorsqu’elles sont exécutées par le processeur 401 , pour comparer la durée de la séquence secondaire avec la description de chaque séquence du flux principal comprise dans une fenêtre temporelle prédéterminée afin de déterminer la séquence du flux principal avec laquelle la différence de durée est minimale. The device 400 also comprises a selection module 405 (SEL) adapted to select, from the descriptor of the main stream and the personalization content, a sequence of the main stream included in a time window such that the selection minimizes the difference in time between the secondary sequence and the sequence selected in the main stream. The selection module is for example implemented by computer program instructions recorded in the memory 402 and configured, when they are executed by the processor 401, to compare the duration of the secondary sequence with the description of each sequence. of the main stream included in a predetermined time window in order to determine the sequence of the main stream with which the difference in duration is minimal.
Le dispositif 400 comprend aussi un module d’adaptation 406. Selon une réalisation particulière, le module d’adaptation met en œuvre un algorithme de type time-stretching visant à augmenter ou réduire la durée d’une séquence audio sans en modifier la tonalité. Ainsi, le module d’adaptation modifie la durée du contenu de personnalisation reçu de façon à ce qu’il coïncide avec la séquence sélectionnée dans le flux principal par le module de sélection 405. The device 400 also includes an adaptation module 406. According to a particular embodiment, the adaptation module implements a time-stretching type algorithm aimed at increasing or reducing the duration of an audio sequence without modifying its tone. Thus, the adaptation module modifies the duration of the personalization content received so that it coincides with the sequence selected in the main stream by the selection module 405.
Le dispositif 400 comprend aussi un module de synchronisation 407 adapté pour associer un contenu adapté par le module 406 à un instant de restitution correspondant à l’instant de restitution de la séquence sélectionnée dans le flux principal par le module de sélection 405. Le module 407 est mis en œuvre par des instructions de programme d’ordinateur enregistrées dans la mémoire 402 et configurées, lorsqu’elles sont exécutées par le processeur 401 , pour obtenir à partir du descripteur du flux principal et de la séquence sélectionnée, une estampille temporelle correspondant à l’instant de restitution du premier échantillon audio de la séquence sélectionnée, et pour associer cette estampille temporelle au contenu adapté afin de permettre une restitution synchronisée du flux principal et du contenu personnalisé adapté. The device 400 also comprises a synchronization module 407 adapted to associate a content adapted by the module 406 to a playback instant corresponding to the playback instant of the sequence selected in the main stream by the selection module 405. The module 407 is implemented by computer program instructions stored in memory 402 and configured, when executed by processor 401, to obtain from the descriptor of the main stream and of the selected sequence, a time stamp corresponding to the instant of restitution of the first audio sample of the selected sequence, and to associate this stamp temporal with adapted content in order to allow synchronized reproduction of the main stream and the adapted personalized content.
L’interface de communication 404 du dispositif est en outre configurée pour transmettre le contenu de personnalisation adapté et des données de synchronisation à un récepteur. The device's communication interface 404 is further configured to transmit tailored personalization content and synchronization data to a receiver.
Selon un mode de réalisation particulier, le dispositif 400 est intégré dans un serveur, tel que le serveur 104 de la figure 1. According to a particular embodiment, the device 400 is integrated into a server, such as the server 104 of FIG. 1.
Selon un mode de réalisation particulier, le dispositif 400 est intégré dans un terminal, tel qu’un autoradio, une enceinte connectée, un assistant vocal ou un smartphone. According to a particular embodiment, the device 400 is integrated into a terminal, such as a car radio, a connected speaker, a voice assistant or a smartphone.
Le dispositif 400 comporte alors en outre un module de mixage adapté pour mixer le flux principal et le contenu de personnalisation adapté et synchronisé, selon l’estampille temporelle associée au contenu adapté, et un module de restitution adapté pour convertir la séquence audio mixée en un signal analogique afin de la restituer via un haut-parleur. The device 400 then further comprises a mixing module adapted to mix the main stream and the adapted and synchronized personalization content, according to the time stamp associated with the adapted content, and a reproduction module adapted to convert the mixed audio sequence into a analog signal in order to reproduce it via a loudspeaker.
Le module de mixage est mis en oeuvre par des instructions de programme d’ordinateur configurées pour réduire le volume de chaque échantillon audio du flux principal dont l’estampille temporelle correspond à une estampille temporelle du contenu de personnalisation adapté de façon à produire un flux audio mixé dans lequel le contenu de personnalisation adapté remplace, lors de sa restitution, la séquence sélectionnée par le module de sélection. The mixing module is implemented by computer program instructions configured to reduce the volume of each audio sample of the main stream whose timestamp corresponds to a timestamp of the personalization content adapted to produce an audio stream mixed in which the adapted personalization content replaces, when it is restored, the sequence selected by the selection module.
Selon un mode particulier de réalisation, le flux principal est une séquence audiovisuelle comportant une composante audio et une composante vidéo, le contenu de personnalisation étant une séquence audiovisuelle comprenant également une composante audio et une composante vidéo. Les différentes étapes qui ont été décrites ci-avant s’appliquent de la même manière aux composantes audio et vidéo des séquences. According to a particular embodiment, the main stream is an audiovisual sequence comprising an audio component and a video component, the personalization content being an audiovisual sequence also comprising an audio component and a video component. The different steps that have been described above apply in the same way to the audio and video components of the sequences.

Claims

REVENDICATIONS
1. Procédé de synchronisation d’au moins un contenu audio de personnalisation avec un flux audio principal en cours de diffusion, le flux audio principal comportant une pluralité de séquences consécutives, le procédé étant caractérisé en ce qu’il est mis en oeuvre par un dispositif comprenant une mémoire et un processeur configuré par des instructions stockées dans la mémoire et adaptées pour : 1. Method for synchronizing at least one personalization audio content with a main audio stream being broadcast, the main audio stream comprising a plurality of consecutive sequences, the method being characterized in that it is implemented by a device comprising a memory and a processor configured by instructions stored in the memory and adapted for:
- Obtenir (200) une description du flux audio principal, comprenant au moins pour chaque séquence composant le flux principal, une indication temporelle de début de restitution de ladite séquence, - Obtain (200) a description of the main audio stream, comprising at least for each sequence making up the main stream, a time indication of the start of restitution of said sequence,
- Sélectionner (202) au moins une séquence du flux principal selon au moins une durée et une priorité associées au contenu de personnalisation, l’au moins une séquence étant sélectionnée parmi une pluralité de séquences consécutives du flux principal comprises dans une fenêtre temporelle particulière dont la durée est déterminée selon ladite priorité associée au contenu de personnalisation, - Select (202) at least one sequence of the main stream according to at least one duration and one priority associated with the personalization content, the at least one sequence being selected from among a plurality of consecutive sequences of the main stream included in a particular time window of which the duration is determined according to said priority associated with the personalization content,
- Adapter (203) temporellement le contenu de personnalisation selon la au moins une séquence sélectionnée, - Adapt (203) temporally the personalization content according to the at least one selected sequence,
- Synchroniser (204) le contenu de personnalisation adapté avec la au moins une séquence sélectionnée, et - Synchronize (204) the adapted personalization content with the at least one selected sequence, and
- Transmettre (205) le contenu de personnalisation synchronisé vers au moins un terminal de restitution. - Transmit (205) the synchronized personalization content to at least one rendering terminal.
2. Procédé selon la revendication 1 dans lequel l’étape de sélection d’au moins une séquence du flux principal comprend : 2. The method of claim 1 wherein the step of selecting at least one sequence of the main stream comprises:
- Pour chaque séquence du flux principal comprise dans la fenêtre temporelle, calcul d’une différence de durée entre la séquence considérée et le contenu de personnalisation, - For each sequence of the main stream included in the time window, calculation of a difference in duration between the sequence considered and the personalization content,
- Sélection de la séquence du flux principal pour laquelle la différence calculée est la plus faible. - Selection of the main flow sequence for which the calculated difference is the smallest.
3. Procédé selon l’une quelconque des revendications précédentes dans lequel l’étape d’adaptation du contenu de personnalisation est réalisée par une technique dite de time-stretching. 3. Method according to any one of the preceding claims, in which the step of adapting the personalization content is carried out by a so-called time-stretching technique.
4. Procédé selon l’une quelconque des revendications précédentes dans lequel une séquence additionnelle est définie par combinaison d’au moins deux séquences consécutives du flux principal. 4. Method according to any one of the preceding claims, in which an additional sequence is defined by combining at least two consecutive sequences of the main stream.
5. Dispositif de synchronisation d’au moins un contenu audio de personnalisation avec un flux audio principal en cours de diffusion, le flux audio principal comportant une pluralité de séquences juxtaposées, le dispositif comprenant: 5. Device for synchronizing at least one personalization audio content with a main audio stream being broadcast, the main audio stream comprising a plurality of juxtaposed sequences, the device comprising:
- Un module de communication (404) adapté pour obtenir une description du flux audio principal, comprenant au moins pour chaque séquence composant le flux principal, une indication temporelle de début de restitution de ladite séquence, - A communication module (404) suitable for obtaining a description of the main audio stream, comprising at least for each sequence making up the main stream, a time indication of the start of playback of said sequence,
- Un module de sélection (405), adapté pour sélectionner au moins une séquence du flux principal selon au moins une durée et une priorité associées au contenu de personnalisation, l’au moins une séquence étant sélectionnée parmi une pluralité de séquences consécutives du flux principal comprises dans une fenêtre temporelle particulière dont la durée est déterminée selon ladite priorité associée au contenu de personnalisation, - A selection module (405), suitable for selecting at least one sequence of the main stream according to at least one duration and one priority associated with the personalization content, the at least one sequence being selected from among a plurality of consecutive sequences of the main stream included in a particular time window, the duration of which is determined according to said priority associated with the personalization content,
- Un module d’adaptation (406) temporelle du contenu de personnalisation selon la au moins une séquence sélectionnée, - A temporal adaptation module (406) of the personalization content according to the at least one selected sequence,
- Un module de synchronisation (407) du contenu de personnalisation adapté avec la au moins une séquence sélectionnée, et - A synchronization module (407) of the personalization content adapted with the at least one selected sequence, and
- Un module de communication (404) configuré pour transmettre le contenu de personnalisation adapté vers au moins un terminal de restitution. - A communication module (404) configured to transmit the adapted personalization content to at least one rendering terminal.
6. Serveur comprenant un dispositif de synchronisation selon la revendication 5. 6. Server comprising a synchronization device according to claim 5.
7. Terminal de restitution comprenant un dispositif de synchronisation selon la revendication 5. 7. Playback terminal comprising a synchronization device according to claim 5.
8. Support d’information comportant des instructions de programme d’ordinateur configurées pour mettre en oeuvre les étapes d’un procédé de synchronisation selon l’une quelconque des revendications 1 à 4, lorsque les instructions sont exécutées par un processeur. 8. Information medium comprising computer program instructions configured to implement the steps of a synchronization method according to any one of claims 1 to 4, when the instructions are executed by a processor.
PCT/EP2020/057823 2019-03-20 2020-03-20 Method for restoring customisation content of a main radio stream WO2020188097A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FRFR1902842 2019-03-20
FR1902842A FR3094165B1 (en) 2019-03-20 2019-03-20 Method for restoring personalization content of a main radio stream

Publications (1)

Publication Number Publication Date
WO2020188097A1 true WO2020188097A1 (en) 2020-09-24

Family

ID=67441382

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2020/057823 WO2020188097A1 (en) 2019-03-20 2020-03-20 Method for restoring customisation content of a main radio stream

Country Status (2)

Country Link
FR (1) FR3094165B1 (en)
WO (1) WO2020188097A1 (en)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2872662A1 (en) * 2004-06-30 2006-01-06 Thomson Licensing Sa METHOD FOR VISUALIZING AUDIOVISUAL SEQUENCES AT A RECEIVER, AND RECEIVER CAPABLE OF VIEWING THEM
US20090031037A1 (en) * 2007-04-30 2009-01-29 Ando Media, Llc Method of streaming media and inserting additional content therein using buffering
US20120137015A1 (en) * 2010-11-30 2012-05-31 General Instrument Corporation Method of targeted ad insertion using http live streaming protocol
CN107943886A (en) * 2017-11-15 2018-04-20 腾讯数码（天津）有限公司 The management method and client of a kind of audio content
WO2018104945A1 (en) * 2016-12-07 2018-06-14 Hearmeout Ltd. Adaptive driving feed
US20180167649A1 (en) * 2015-06-17 2018-06-14 Sony Semiconductor Solutions Corporation Audio recording device, audio recording system, and audio recording method
EP3410701A1 (en) * 2017-05-31 2018-12-05 Nxp B.V. Audio/video time stretching

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2872662A1 (en) * 2004-06-30 2006-01-06 Thomson Licensing Sa METHOD FOR VISUALIZING AUDIOVISUAL SEQUENCES AT A RECEIVER, AND RECEIVER CAPABLE OF VIEWING THEM
US20090031037A1 (en) * 2007-04-30 2009-01-29 Ando Media, Llc Method of streaming media and inserting additional content therein using buffering
US20120137015A1 (en) * 2010-11-30 2012-05-31 General Instrument Corporation Method of targeted ad insertion using http live streaming protocol
US20180167649A1 (en) * 2015-06-17 2018-06-14 Sony Semiconductor Solutions Corporation Audio recording device, audio recording system, and audio recording method
WO2018104945A1 (en) * 2016-12-07 2018-06-14 Hearmeout Ltd. Adaptive driving feed
EP3410701A1 (en) * 2017-05-31 2018-12-05 Nxp B.V. Audio/video time stretching
CN107943886A (en) * 2017-11-15 2018-04-20 腾讯数码（天津）有限公司 The management method and client of a kind of audio content

Also Published As

Publication number Publication date
FR3094165A1 (en) 2020-09-25
FR3094165B1 (en) 2022-03-18

Similar Documents

Publication Publication Date Title
EP2811749B1 (en) Synchronisation of multimedia content on a second screen
EP3381196B1 (en) Method for synchronising an alternative audio stream
EP3646548B1 (en) Method for transmitting interrupted audio content in a hybrid receiver, system, receiver, and program associated with said method
EP3826316B1 (en) Decoder device generating an order of an audio profile to be applied
FR2850821A1 (en) Audio signal e.g. television signal, sub-titling system for e.g. deaf and dumb people, has combining unit combining delayed audio signal and subtitling signal into subtitled audio signal applied to receiver equipment
WO2020188097A1 (en) Method for restoring customisation content of a main radio stream
EP3890328B1 (en) Method for managing an audio stream played synchronously usnig a reference clock
FR2894104A1 (en) Interactive menu providing method for e.g. mobile telephone, involves generating interactive menu from data pertaining to broadcast content and transmitting generated menu to user communication terminal through return path of network
EP3501125B1 (en) Method of synchronisation of two data streams and implementation of this method in a receiver
EP3025477B1 (en) Method of synchronisation during the processing, by a multimedia player, of an item of multimedia content transmitted by an mbms service
EP3840388A1 (en) Dual audio-link decoder equipment
EP1219056A2 (en) System for transmitting to a user data related to a sound sequence he is listening to or has listened to
WO2020260637A1 (en) Method for transmitting audio content to a hybrid receiver by receiving manifests generated by a manager server, receiver and associated manager server
EP3092777B1 (en) Method of processing the restitution error in respect of a digital content
US9148624B2 (en) System for and method of providing graphical contents during a communication session
EP2854415B1 (en) Method for dynamic transmission of information data relating to an audio and/or video programme
WO2016102895A1 (en) Multimedia content distribution system
FR3134268A1 (en) Local off-hook method in a digital radio receiver
EP4199502A1 (en) Device and method for synchronized audio-video rendering
EP2915330A1 (en) Method and module for switching from a first programme to a second programme, and corresponding broadcasting method, headend, computer program and storage medium
EP4091331A1 (en) Opt-out method for a stream in a variable bit-rate multiplex, the stream consisting of a plurality of chunks, associated broadcast site and devices
FR3098612A1 (en) Radio with automatic source or station change
FR3100096A1 (en) REMOTE SOUND RESTITUTION SYSTEM INCLUDING A DIGITAL AUDIO DIFFUSER CONNECTED TO A DIGITAL AUDIO RECEIVER BY AT LEAST TWO WIRELESS LINKS
EP3753255A1 (en) Reception of a flow representing a multimedia content
FR2905546A1 (en) METHOD AND SYSTEM FOR SYNCHRONIZATION OF INFORMATION WITH A FLOW

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20711213

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20711213

Country of ref document: EP

Kind code of ref document: A1