JP2020022082A - Stream distribution system with segment file division function and program - Google Patents

Stream distribution system with segment file division function and program Download PDF

Info

Publication number
JP2020022082A
JP2020022082A JP2018144938A JP2018144938A JP2020022082A JP 2020022082 A JP2020022082 A JP 2020022082A JP 2018144938 A JP2018144938 A JP 2018144938A JP 2018144938 A JP2018144938 A JP 2018144938A JP 2020022082 A JP2020022082 A JP 2020022082A
Authority
JP
Japan
Prior art keywords
content
data
segment file
control data
distribution system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018144938A
Other languages
Japanese (ja)
Other versions
JP7162295B2 (en
Inventor
啓志 香取
Keiji Katori
啓志 香取
秀典 貫定
Hidenori Kanjo
秀典 貫定
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BBR CO Ltd
Radiko
Radiko Co Ltd
Media Platform Lab Co Ltd
Original Assignee
BBR CO Ltd
Radiko
Radiko Co Ltd
Media Platform Lab Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BBR CO Ltd, Radiko, Radiko Co Ltd, Media Platform Lab Co Ltd filed Critical BBR CO Ltd
Priority to JP2018144938A priority Critical patent/JP7162295B2/en
Publication of JP2020022082A publication Critical patent/JP2020022082A/en
Application granted granted Critical
Publication of JP7162295B2 publication Critical patent/JP7162295B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

To provide a stream distribution system capable of exchanging a specific content such as advertisement for distribution in real time without causing content disorder.SOLUTION: A content distribution system 200 receives a broadcasting audio stream and a control signal at a broadcasting station and executes content data division (preparation of segment file) using timing of content exchange in a media center executing IP radio distribution, thereby achieving exchange in real time without causing content disorder in exchange distribution of a specific content such as advertisement.SELECTED DRAWING: Figure 1

Description

本発明は、ストリーム配信システムにおける時間管理とセグメントファイル分割方法に関する。具体的には、HLS(HTTP Live Streaming)ストリーム配信システムにおいて、メタファイル(プレイリストなど)に記載されたセグメントファイルに基づいて、ストリーミング配信を行う際に、指定された時間でストリーミング配信を中断してCM等の別のコンテンツを挿入することを可能にする、セグメントファイル分割機能を備えたHLSストリーム配信システム及びプログラムに関する。   The present invention relates to time management and a segment file division method in a stream distribution system. Specifically, in an HLS (HTTP Live Streaming) stream distribution system, when performing a streaming distribution based on a segment file described in a meta file (playlist or the like), the streaming distribution is interrupted at a designated time. The present invention relates to an HLS stream distribution system and a program having a segment file division function, which enables another content such as a CM to be inserted.

電波による放送をインターネットなどのIPネットワーク経由で同じ時間帯に同時配信するサービスは、IPサイマル放送と呼ばれている。ラジオの場合は、IPサイマルラジオともいう。例えば、図6に示されるように、放送局(ラジオ局など)のコンテンツ提供者から提供されるライブコンテンツ(例えば、ラジオ音声信号)を中継配信するメディアセンターでは、エンコーダによって、音声映像データをエンコードし、分配サーバを介してユーザともいうべき視聴者(リスナー)に配信を行っている。サーバへは、セグメンタによって音声や映像データを数秒程度毎のデータにして(セグメント化)送信することができる。   A service for simultaneously distributing radio broadcasts in the same time zone via an IP network such as the Internet is called IP simulcast. In the case of radio, it is also called IP simul radio. For example, as shown in FIG. 6, in a media center that relays and distributes live content (for example, a radio audio signal) provided by a content provider of a broadcasting station (radio station or the like), audio and video data is encoded by an encoder. Then, the content is distributed to viewers (listeners), which may be called users, via the distribution server. Audio and video data can be converted into data every several seconds (segmented) and transmitted to the server by a segmenter.

IPサイマルラジオ等の放送コンテンツ配信システムでは、広告等の特定コンテンツを差替えて配信するサービスが求められており、特に、放送局の存在する地域と異なる地域へ配信する場合、当初作成した広告を配信先の地域に適したものに差替えて配信するニーズが高い。このようなニーズに対応するための従来技術としては、例えば、ラジオ局における自動番組制御装置において、ラジオ番組を差替える技術(特許文献1)がある。当該方式は、番組制作においてテーブル情報の共用化により差替え作業を軽減することができる。   In a broadcast content distribution system such as an IP simul radio, a service for replacing specific content such as an advertisement is required. In particular, when distributing to an area different from an area where a broadcasting station exists, an initially created advertisement is distributed. There is a high need to replace and distribute to the one suitable for the destination area. As a conventional technique for meeting such needs, for example, there is a technique of replacing a radio program in an automatic program control device in a radio station (Patent Document 1). This method can reduce replacement work by sharing table information in program production.

その他、スケジュール表に基づいて、指定の時刻になると広告を挿入、置き換えることが可能なIPラジオ配信システム(特許文献2)や、スケジュール表等を必要とせず配信時刻が不明のコンテンツの差替えが可能なコンテンツ配信システム(特許文献3)などがある。   In addition, an IP radio distribution system that can insert and replace an advertisement at a specified time based on a schedule table (Patent Literature 2), or replace a content whose distribution time is unknown without the need for a schedule table or the like Content distribution system (Patent Document 3).

特開平6−112912号公報JP-A-6-112912 特許第4647879号公報Japanese Patent No. 4647879 特許第6254500号公報Japanese Patent No. 6254500

しかしながら、従来技術では、元の各放送局(送出設備)で予めコンテンツを差替えて、メディアセンターはそのまま中継配信している(例えば、特許文献1)ため、メディアセンター側でリアルタイムにコンテンツ内容を判定して差替えることができなかった。   However, in the prior art, the content is replaced in advance at each of the original broadcasting stations (transmission facilities), and the media center relays and distributes the content as it is (for example, Patent Document 1), so that the media center determines the content in real time. And couldn't replace it.

また、ドラマ等のコンテンツの場合は、各放送局は、いつCMを入れるかを事前に設定でき、タイムスケジュールデータを元に差替えを行うことができるが、スポーツ中継等の生放送では、CMを入れる時刻を事前に設定することができないという問題があった。例えば、特許文献2に記載のIPラジオ配信システムでは、差替え対象のコンテンツを検出するのに配信時刻を含むスケジュール表が必要であるため、このような問題に対処することができない。   Also, in the case of contents such as dramas, each broadcasting station can set in advance when to insert a CM, and can perform replacement based on the time schedule data. There was a problem that the time could not be set in advance. For example, the IP radio distribution system described in Patent Literature 2 cannot deal with such a problem because a schedule table including a distribution time is required to detect a content to be replaced.

さらに、中継配信するメディアセンターでは、音声映像データをエンコードした後、セグメント化して分配サーバを介して視聴者(リスナー)に配信を行う(例えば、特許文献3に記載)が、通常セグメントは、数秒程度毎のデータでまとめられる。そのため、普通にセグメント化するとCMの切れ目ではない箇所で切れてしまうことになり、コンテンツ切り替えの繋ぎ目に不要な画面や音声が見えたり聞こえたりしてしまう、コンテンツの途中で切り替わってしまう等の事態が発生するといった不具合が生じ得る。以降、IPサイマルラジオを例に説明を行うこととし、音声を映像に読み替えれば、動画配信やテレビ放送についても同様である。   Furthermore, in a media center that relays and distributes, after encoding audio and video data, it is segmented and distributed to a viewer (listener) via a distribution server (for example, described in Patent Document 3). The data is summarized for each degree. Therefore, if segmentation is performed normally, it will be cut at a place other than the break of the CM, and unnecessary screens and sounds will be seen or heard at the joint of content switching, switching will occur in the middle of the content, etc. A trouble such as a situation may occur. Hereinafter, description will be made by taking an IP simultaneous radio as an example, and the same applies to moving image distribution and television broadcasting if audio is replaced with video.

上述の課題を解決するために、本発明では、IPラジオ配信を行うメディアセンターにおいて、放送用音声信号をIP化したデータストリームおよび放送局での制御信号をIP化した情報をそれぞれ受け取り、コンテンツ切り替えのタイミングを利用してコンテンツデータ分割(セグメントファイルの作成)を行うことで、放送時のコンテンツ制御に合わせたセグメント化を実現し、広告等の特定コンテンツの差替え配信において、コンテンツの乱れの無い差替えがリアルタイムに可能となるコンテンツ配信システム及びプログラム(以下、コンテンツ配信システム等)を提供する。   In order to solve the above-described problems, in the present invention, a media center that performs IP radio distribution receives a data stream obtained by converting a broadcast audio signal into IP and information obtained by converting a control signal from a broadcast station into IP, and performs content switching. By performing content data division (segment file creation) using the timing of (1), segmentation in accordance with content control during broadcasting is realized, and in replacement delivery of specific content such as advertisements, replacement without disruption of content. A content distribution system and a program (hereinafter referred to as a content distribution system, etc.) that can be executed in real time.

本発明に係るコンテンツ配信システムの1つの実施形態として、コンテンツ配信システムは、ストリームデータをエンコードしてエンコードデータを生成するエンコーダと、
前記エンコードデータを一定のセグメント継続時間で分割してセグメントファイルを生成するセグメンタと、
前記ストリームデータ又は前記エンコードデータを入力データとして受け取り、前記入力データを遅延させて出力する遅延回路と、
を含み、
前記セグメンタは、コンテンツ制御データを受信し、
前記ストリームデータ及び前記コンテンツ制御データには、同一の計時機能によりタイムスタンプが付与され、
前記セグメンタは、前記コンテンツ制御データの発生時刻と同一時刻に発生したベースバンド信号に対応するエンコードデータを発見した場合に、前記エンコードデータを前記コンテンツ制御データに基づくタイミングで分割して、セグメントファイルを生成することを特徴とする。
As one embodiment of the content distribution system according to the present invention, the content distribution system encodes stream data to generate encoded data;
A segmenter that divides the encoded data at a constant segment duration to generate a segment file;
A delay circuit that receives the stream data or the encoded data as input data, and delays and outputs the input data;
Including
The segmenter receives content control data,
The stream data and the content control data are provided with a time stamp by the same clock function,
The segmenter, when finding encoded data corresponding to a baseband signal generated at the same time as the occurrence time of the content control data, divides the encoded data at a timing based on the content control data, and divides the segment file. It is characterized by generating.

本発明に係るコンテンツ配信システムの好ましい実施形態として、前記遅延回路は、前記エンコーダよりも前に設けられ、前記入力データとして前記ストリームデータを受け取ることを特徴とする。   As a preferred embodiment of the content distribution system according to the present invention, the delay circuit is provided before the encoder, and receives the stream data as the input data.

本発明に係るコンテンツ配信システムの好ましい実施形態として、前記遅延回路は、前記エンコーダと前記セグメンタとの間に設けられ、前記入力データとして前記エンコードデータを受け取ることを特徴とする。   As a preferred embodiment of the content distribution system according to the present invention, the delay circuit is provided between the encoder and the segmenter, and receives the encoded data as the input data.

本発明に係るコンテンツ配信システムの好ましい実施形態として、前記コンテンツ制御データは、前記ストリームデータにおけるコンテンツを差替えるためのタイミングを示す発火信号又は前記ストリームデータにおけるCMのON/OFFデータであることを特徴とする。   As a preferred embodiment of the content distribution system according to the present invention, the content control data is an ignition signal indicating a timing for replacing content in the stream data or CM ON / OFF data in the stream data. And

本発明に係るコンテンツ配信システムの好ましい実施形態として、前記セグメンタは、前記コンテンツ制御データに基づくタイミングで、前記エンコードデータを分割した際に、前記コンテンツ制御データに基づくタイミングよりも前に生成されたセグメントファイルを、直前のセグメントファイルにマージすることを特徴とする。   As a preferred embodiment of the content distribution system according to the present invention, the segmenter generates a segment generated before the timing based on the content control data when the encoded data is divided at the timing based on the content control data. The file is merged with the previous segment file.

本発明に係るコンテンツ配信システムの好ましい実施形態として、前記セグメンタは、前記コンテンツ制御データに基づくタイミングで、前記エンコードデータを分割した際に、次のコンテンツ制御データを受け取るまで、後続のエンコードデータを前記一定のセグメント継続時間で分割してセグメントファイルを生成することを特徴とする。   As a preferred embodiment of the content distribution system according to the present invention, the segmenter, at the timing based on the content control data, when the encoded data is divided, until the next content control data is received, the subsequent encoded data It is characterized in that a segment file is generated by dividing at a fixed segment duration time.

本発明に係るコンテンツ配信システムの好ましい実施形態として、前記セグメンタは、前記コンテンツ制御データに基づくタイミングで、前記エンコードデータを分割した際に、前記コンテンツ制御データに基づくタイミングよりも前に生成されたセグメントファイルを、直前のセグメントファイルにマージし、
前記セグメンタは、前記コンテンツ制御データに基づくタイミングで、前記エンコードデータを分割した際に、前記コンテンツ制御データに基づくタイミングよりも前に生成されたセグメントファイルの時間だけ前記一定の分割タイミングを遅らせ、
前記コンテンツ制御データに基づくタイミングよりも後の前記エンコードデータを、遅らせた前記一定の分割タイミングで分割して、セグメントファイルを生成することを特徴とする。
As a preferred embodiment of the content distribution system according to the present invention, the segmenter generates a segment generated before the timing based on the content control data when the encoded data is divided at the timing based on the content control data. Merge the file with the previous segment file,
The segmenter, at the timing based on the content control data, when dividing the encoded data, delays the fixed division timing by the time of the segment file generated before the timing based on the content control data,
The encoding data after the timing based on the content control data is divided at the fixed division timing delayed to generate a segment file.

本発明に係るコンテンツ配信システムの好ましい実施形態として、前記セグメンタは、前記コンテンツ制御データに基づくタイミングで、前記エンコードデータを分割した際に、前記コンテンツ制御データに基づくタイミングよりも後に生成されたセグメントファイルを、該セグメントファイルの直後のセグメントファイルにマージすることを特徴とする。   As a preferred embodiment of the content distribution system according to the present invention, the segmenter generates a segment file generated after the timing based on the content control data when the encoded data is divided at the timing based on the content control data. Is merged with the segment file immediately after the segment file.

本発明に係るコンテンツ配信システムの好ましい実施形態として、前記セグメンタは、生成された1以上のセグメントファイルの時間的な長さ及びURLを記録したメタファイルを生成することを特徴とする。   In a preferred embodiment of the content distribution system according to the present invention, the segmenter generates a metafile in which a time length and a URL of one or more generated segment files are recorded.

本発明に係るコンテンツ配信システムの好ましい実施形態として、前記メタファイルに記録された1以上のセグメントファイルのURLを、別のセグメントファイルを指し示す新たなURLに書き換えることで、前記ストリームデータにおけるコンテンツの一部を別の内容に差替えることを特徴とする。   As a preferred embodiment of the content distribution system according to the present invention, the URL of one or more segment files recorded in the meta file is rewritten to a new URL pointing to another segment file, so that one of the contents in the stream data is rewritten. It is characterized in that the part is replaced with another content.

本発明に係るプログラムの1つの実施形態として、プログラムをコンピュータによって実行させることで、前記コンピュータを前記コンテンツ配信システムとして機能させることを特徴とする。   As one embodiment of the program according to the present invention, the program is executed by a computer so that the computer functions as the content distribution system.

本発明に係るコンテンツ配信システム等は、リアルタイムに広告等の特定コンテンツの差替え配信において、コンテンツの乱れの無い差替えを可能とする。これにより、メディアセンター(IPラジオ配信事業者)は、自動的に広告等のコンテンツを差替えて配信するサービスを行うことができる。   The content distribution system and the like according to the present invention enables replacement without disturbing content in replacement delivery of specific content such as an advertisement in real time. Thereby, the media center (IP radio distribution company) can perform a service of automatically replacing and distributing contents such as advertisements.

本発明の一実施形態に係るコンテンツ配信システムの構成を示す概念図である。1 is a conceptual diagram illustrating a configuration of a content distribution system according to an embodiment of the present invention. コンテンツ制御データを用いた音声ストリームのセグメント化の概要を示す概念図である。FIG. 3 is a conceptual diagram showing an outline of segmentation of an audio stream using content control data. 図2のセグメント化により生成されたセグメントファイルのメタファイル(プレイリスト)の内容を示す図である。FIG. 3 is a diagram showing the contents of a metafile (playlist) of a segment file generated by the segmentation of FIG. 2. コンテンツ制御データを用いて音声ストリームをセグメント化する処理を行うプログラムの動作を説明するシーケンス図である。FIG. 9 is a sequence diagram illustrating an operation of a program that performs a process of segmenting an audio stream using content control data. 音声ストリームのセグメント化の変形例を示す概念図である。It is a conceptual diagram which shows the modification of segmentation of an audio stream. 音声ストリームのセグメント化のさらに別の変形例を示す概念図である。It is a conceptual diagram which shows another modification of segmentation of an audio stream. 従来のストリーミング配信において音声ストリームの内容の差替えなしでセグメント化を行うコンテンツ配信システムの構成を示す概念図である。FIG. 11 is a conceptual diagram showing a configuration of a content distribution system that performs segmentation without replacing the content of an audio stream in conventional streaming distribution. 従来のストリーミング配信において発火信号に基づいて音声ストリームの内容の差替えを試みた場合に生じ得るセグメント化の問題点を示す概念図である。FIG. 9 is a conceptual diagram showing a problem of segmentation that may occur when an attempt is made to replace the content of an audio stream based on an ignition signal in conventional streaming distribution.

以下に図面を参照して、本発明の一実施形態について説明する。なお、実施の形態を説明するための全ての図において、同じものには原則として同一の符号を付し、その繰り返しの説明は省略する。本発明の個々の実施形態は、独立したものではなく、それぞれ組み合わせて適宜実施することができる。   An embodiment of the present invention will be described below with reference to the drawings. In all the drawings for describing the embodiments, the same components are denoted by the same reference numerals in principle, and the repeated description thereof will be omitted. The individual embodiments of the present invention are not independent, and can be appropriately implemented in combination with each other.

図7は、従来のストリーミング配信において音声ストリームの内容の差替えなしでセグメント化を行うコンテンツ配信システムの構成を概念的に示す。従来、コンテンツ提供者であるラジオ局は、配信コンテンツである音声のベースバンド信号(デジタル又はアナログの電気信号)を局側配信装置800に流し込むことにより、IPストリーム伝送によって広域IP網(インターネット、専用線など)を介して、メディアセンターに伝送する。局側配信装置800は、信号遠隔伝送機能を備えた信号遠隔伝送部805を含む。ベースバンド信号は、信号遠隔伝送部805の信号遠隔伝送機能によってストリームデータとして伝送される。   FIG. 7 conceptually shows a configuration of a content distribution system that performs segmentation without replacing the content of an audio stream in conventional streaming distribution. 2. Description of the Related Art Conventionally, a radio station, which is a content provider, flows a baseband signal (digital or analog electric signal) of audio, which is distribution content, into a station side distribution device 800, thereby transmitting a wide area IP network (Internet, dedicated Transmission to the media center via a wire. The station side distribution device 800 includes a signal remote transmission unit 805 having a signal remote transmission function. The baseband signal is transmitted as stream data by the signal remote transmission function of the signal remote transmission unit 805.

メディアセンターは、コンテンツ配信システム900によってベースバンド信号(音声)に対応するストリームデータを受け取り、番組など内容を変更せずにインターネット経由でほぼ同時に視聴者に配信提供を行う。インターネットなどのIPネットワーク上で電波による放送と同内容のものを配信することは、同時並行放送(サイマル放送)、特にIPサイマル放送と呼ばれている。   The media center receives the stream data corresponding to the baseband signal (audio) by the content distribution system 900, and distributes and provides the viewer almost simultaneously via the Internet without changing the content of the program or the like. Distributing the same content as broadcast by radio waves over an IP network such as the Internet is called simultaneous parallel broadcasting (simultaneous broadcasting), particularly IP simultaneous broadcasting.

インターネット経由での音や映像などマルチメディアコンテンツの提供は、コンピュータやスマートフォンに適した形式に圧縮変換(エンコード)されて、なおかつ情報配信に広く利用されているHTTPプロトコルを利用する方式である HLS(RFC8216) が一般的に利用されている。HLSでは、エンコードされた微小なストリームデータを時間軸上でパックして秒単位の大きなかたまりのファイルを生成してHTTPにより配信する。   The provision of multimedia contents such as sound and video via the Internet is a method that uses the HTTP protocol that is compressed and converted (encoded) into a format suitable for computers and smartphones and that is widely used for information distribution. RFC 8216) is commonly used. In the HLS, encoded minute stream data is packed on a time axis to generate a large chunk file in seconds and distributed by HTTP.

ここでは、このかたまりを作ることをセグメント化と呼び、生成された各々のファイルをセグメントファイルと呼ぶことにする。セグメントファイルに格納されている信号の長さ(尺)は一定で、数秒〜数十秒のファイルである。セグメントファイルの尺を十秒としても一般性を失わないので、特に断りがなれば、便宜上セグメントファイルの尺を10秒として考える。   Here, creating this block is called segmentation, and each generated file is called a segment file. The length (length) of the signal stored in the segment file is constant and is a file of several seconds to several tens of seconds. Since the generality is not lost even if the length of the segment file is set to 10 seconds, the length of the segment file is assumed to be 10 seconds for convenience unless otherwise specified.

コンテンツ配信システム900は、エンコーダ910とセグメンタ920とを含む。エンコードを行うプログラム(もしくはプログラム内の機能ブロックもしくはシステム)をエンコーダと呼び、セグメント化を行うプログラム(もしくはプログラム内の機能ブロックもしくはシステム)をセグメンタと呼ぶ。放送局から伝送されたストリームデータは、エンコーダ910によってエンコードされ、セグメンタ920によってセグメント化される。   Content distribution system 900 includes an encoder 910 and a segmenter 920. A program that performs encoding (or a functional block or system in the program) is called an encoder, and a program that performs segmentation (or a functional block or system in the program) is called a segmenter. Stream data transmitted from a broadcast station is encoded by an encoder 910 and segmented by a segmenter 920.

図7に示すようなストリーミング配信の従来例において、メディアセンターにおけるコンテンツ配信システム900は、そのままでは、CMや番組などの提供された放送内容の一部を差替えてインターネットで配信提供することができない。差替えるためには、切り替え箇所のタイミング情報が必要なので、コンテンツ提供者である放送局からベースバンド信号とは別に、当該タイミングを示す発火信号の提供を受ける必要がある。   In the conventional example of streaming distribution as shown in FIG. 7, the content distribution system 900 in the media center cannot distribute and provide a part of the provided broadcast content such as a CM or a program on the Internet as it is. In order to perform the replacement, timing information of the switching point is required, and therefore, it is necessary to receive, from the broadcasting station as the content provider, an ignition signal indicating the timing separately from the baseband signal.

図7に示す従来例では、信号遠隔伝送部805の信号遠隔伝送機能による広域IP網でのIPストリーム伝送、エンコーダ910、セグメンタ920の各処理により遅延が発生して、元のベースバンド信号が発生した時刻は、セグメントファイルにおいて喪失するという不具合が生じる。そのため、メディアセンターのコンテンツ配信システム900が、コンテンツ提供者である放送局から差替えタイミングを取得したとしても、セグメントファイル上の差替え点を特定することが困難である。   In the conventional example shown in FIG. 7, the delay occurs due to the IP stream transmission in the wide area IP network by the signal remote transmission function of the signal remote transmission unit 805 and each processing of the encoder 910 and the segmenter 920, and the original baseband signal is generated. There is a problem that the time is lost in the segment file. Therefore, even if the content distribution system 900 of the media center acquires the replacement timing from the broadcasting station that is the content provider, it is difficult to identify the replacement point on the segment file.

このような問題を解決するために、コンテンツ提供者である放送局にて信号が発生した時点で、その信号にその時刻を打刻して(タイムスタンプを付加して)遠隔伝送することが考えられる。図8は、従来のストリーミング配信において発火信号に基づいて音声ストリームの内容の差替えを試みた例を示す。   In order to solve such a problem, it is considered that when a signal is generated at a broadcasting station which is a content provider, the time is stamped on the signal (with a time stamp added) and the signal is transmitted remotely. Can be FIG. 8 shows an example of an attempt to replace the content of an audio stream based on an ignition signal in conventional streaming distribution.

図8に示す従来例において、局側配信装置800は、信号遠隔伝送機能に替えて、ベースバンド信号(音声)にタイムスタンプを付加して伝送するためのスタンプ付加信号遠隔伝送機能を備えたタイムスタンプ付加信号遠隔伝送部810と、ベースバンド信号における音声コンテンツの差替えタイミングを指定可能なようにコンテンツ制御データにタイムスタンプを付加して伝送するための付加情報伝送機能を備えた付加情報伝送部820と、タイムスタンプの時刻を発生させるための計時機能を備えた計時部830とを含む。計時部830は、コンテンツの差替えタイミングを指定可能なように同じタイムスタンプの時刻をタイムスタンプ付加信号遠隔伝送部810及び付加情報伝送部820に提供する。   In the conventional example shown in FIG. 8, the station side distribution device 800 has a time stamp having a stamped signal remote transmission function for adding a time stamp to a baseband signal (voice) and transmitting the signal instead of the signal remote transmission function. Stamp-added signal remote transmission unit 810 and additional information transmission unit 820 having an additional information transmission function for adding a time stamp to content control data and transmitting the content control data so that the replacement timing of audio content in the baseband signal can be specified. And a clock unit 830 having a clock function for generating the time of the time stamp. The timer 830 provides the same time stamp to the time stamp additional signal remote transmitter 810 and the additional information transmitter 820 so that the replacement timing of the content can be specified.

ベースバンド信号はリアルタイムに時々刻々と発生するので、タイムスタンプ付加信号遠隔伝送部810は、計時部830で発生させた時刻に基づいて時々刻々と打刻を行う(タイムスタンプを付加する)。ベースバンド信号に対応するストリームデータを受け取ったコンテンツ配信システム900では、エンコーダ910により、時刻情報は失われるため、エンコーダ910とセグメンタ920との間を調停してエンコードされたデータがどの時点のデータかを示すタイムスタンプ情報連携機能が必要となる。   Since the baseband signal is generated from time to time in real time, the timestamp-added signal remote transmission unit 810 performs time-stamping based on the time generated by the clock unit 830 (adds a timestamp). In the content distribution system 900 that has received the stream data corresponding to the baseband signal, since the time information is lost by the encoder 910, the data at which point the data encoded by arbitrating between the encoder 910 and the segmenter 920 is data. Is required.

調停連携されたタイムスタンプとエンコード後のデータ(「エンコードデータ」と呼ぶ)(微小時間)の組を元にセグメンタ920は、HLSを生成する。HLSにおいては、*.m3u8(メタファイル)もしくはセグメントファイルのファイル名などにより、時刻情報を記述することが可能である。   The segmenter 920 generates an HLS based on a set of arbitrated and linked time stamps and encoded data (called “encoded data”) (a minute time). In HLS, *. Time information can be described by m3u8 (meta file) or the file name of a segment file.

セグメントファイルの時刻情報とは、当該ファイル内の信号の最初の時間と最後の時間である。これを開始時間と終了時間と呼ぶ。また、情報としては、開始時間と尺など開始時間と終了時間の2点を導出特定可能な2組の情報でもよい。   The time information of the segment file is the first time and the last time of the signal in the file. These are called start time and end time. Further, the information may be two sets of information from which two points such as a start time and an end time can be derived and specified.

図8に示す従来例では、正確な時刻情報を持つセグメントファイルと、発火信号やCMのON/OFFデータなどのコンテンツ制御データに含まれる差替え発火情報に基づいて差替えを試みることができる。差替えタイミングの近傍で開始時間(終了時間)が最も近いセグメントファイルの切れ目が差替え箇所となる。この差替え箇所に挟まれたセグメントファイル群を別の内容のファイルと差替えればよい。   In the conventional example shown in FIG. 8, replacement can be attempted based on a segment file having accurate time information and replacement firing information included in content control data such as a firing signal or CM ON / OFF data. A break in the segment file whose start time (end time) is closest to the replacement timing is the replacement location. The segment file group sandwiched between the replacement portions may be replaced with a file having another content.

ところが、セグメントファイルの尺は、例えば10秒(小さくとも数秒)なので、理想の差替え点とは秒単位のズレが生じることが多く、図7に示すとおり、このズレは、コンテンツ切り替えの繋ぎ目に不要な音声が聴こえたり、必要な音声が欠如したりするため、視聴において致命的なズレとなる。このような致命的なズレを防ぐために、理想の差替え点を含むファイルを編集して、ファイル内の理想差替え点を演算検出して差替えたい別の内容を書き込む方法が考えられるが、これは演算量や処理時間を考慮すると現実的ではない。   However, since the length of a segment file is, for example, 10 seconds (at least several seconds), a deviation from the ideal replacement point in units of seconds often occurs. As shown in FIG. 7, this deviation is generated at the joint of content switching. Unnecessary sounds can be heard or necessary sounds are missing, resulting in a fatal shift in viewing. In order to prevent such a fatal deviation, there is a method of editing a file including an ideal replacement point, calculating the ideal replacement point in the file, and writing another content to be replaced. It is not realistic considering the amount and processing time.

図8に示すような、セグメントファイルの切れ目(分かれ目)と差替えタイミングがズレる問題を解決するために、セグメンタに対し任意の時間にセグメントファイルを分割する機能を付与した、図1に示すようなコンテンツ配信システムが必要である。図1は、本発明の一実施形態に係るコンテンツ配信システムの構成を概念的に示す。   In order to solve the problem of the gap between the segment file breaks (splits) and the replacement timing as shown in FIG. 8, the segmenter is provided with a function of dividing the segment file at an arbitrary time, as shown in FIG. A distribution system is required. FIG. 1 conceptually shows a configuration of a content distribution system according to an embodiment of the present invention.

コンテンツ提供者であるラジオ局は、配信コンテンツである音声ベースバンド信号及び、配信コンテンツにおいて差替え部分を指定するための情報を含むコンテンツ制御データ(例えば、発火信号、CMのON/OFFデータ)を、IPストリーム伝送によって広域IP網(インターネット/専用回線)を介してメディアセンターに伝送することができる。   The radio station, which is a content provider, transmits an audio baseband signal, which is distribution content, and content control data (for example, an ignition signal, CM ON / OFF data) including information for designating a replacement part in the distribution content. It can be transmitted to a media center via a wide area IP network (Internet / dedicated line) by IP stream transmission.

コンテンツ提供者の局側配信装置100は、図8に示した局側配信装置800と同様の構成であり、信号遠隔伝送機能に替えて、ベースバンド信号(音声)にタイムスタンプを付加して伝送するためのスタンプ付加信号遠隔伝送機能を備えたタイムスタンプ付加信号遠隔伝送部110と、ベースバンド信号における音声の差替えタイミングを指定可能なようにコンテンツ制御データにタイムスタンプを付加して伝送するための付加情報伝送機能を備えた付加情報伝送部120と、タイムスタンプの時刻を発生させるための計時機能を備えた計時部130とを含む。計時部130は、コンテンツの差替えタイミングを指定可能なように同じタイムスタンプの時刻をタイムスタンプ付加信号遠隔伝送部110及び付加情報伝送部120に提供する。   The station-side distribution apparatus 100 of the content provider has the same configuration as the station-side distribution apparatus 800 shown in FIG. 8, and transmits a baseband signal (voice) with a time stamp added thereto instead of the signal remote transmission function. A time stamp added signal remote transmission unit 110 having a stamp added signal remote transmission function for transmitting a time stamp added to the content control data so as to be able to designate an audio replacement timing in the baseband signal. It includes an additional information transmission unit 120 having an additional information transmission function and a clock unit 130 having a clock function for generating a time of a time stamp. The timer 130 provides the same timestamp time to the timestamp-added signal remote transmission unit 110 and the additional information transmission unit 120 so that the replacement timing of the content can be specified.

メディアセンターでは、外部から発火情報を受け付け、当該タイミングでセグメントファイルを分割するセグメンタを準備する必要がある。具体的には、メディアセンターのコンテンツ配信システム200に含まれるセグメンタ230においてエンコード後のデータ(エンコードデータ)に対応する信号の発生時刻を常に観測する。   In the media center, it is necessary to receive firing information from the outside and prepare a segmenter for dividing the segment file at the timing. Specifically, the segmenter 230 included in the content distribution system 200 of the media center always observes the generation time of the signal corresponding to the encoded data (encoded data).

セグメンタ230は、放送用音声ストリームであるエンコードデータを予め決められた一定のセグメント継続時間(例えば、10秒)で分割してセグメントファイルを生成する。セグメンタ230は、一定のセグメント継続時間の他に、コンテンツ制御データで指定されるタイミングに基づいて、エンコードデータを分割してセグメントファイルを生成することができる。   The segmenter 230 divides the encoded data, which is a broadcast audio stream, by a predetermined fixed segment duration (for example, 10 seconds) to generate a segment file. The segmenter 230 can divide the encoded data and generate a segment file based on the timing specified by the content control data in addition to the fixed segment duration.

つまり、セグメンタ230は、放送局などのコンテンツ提供者で計測したコンテンツ制御データ(発火信号、CMのON/OFFデータ)を利用して、コンテンツ制御データと同一時刻に発生したベースバンド信号に対応するエンコードデータを発見した場合に、エンコードデータをコンテンツ制御データに基づくタイミングで分割して、セグメントファイルを生成する。   That is, the segmenter 230 uses the content control data (ignition signal, CM ON / OFF data) measured by a content provider such as a broadcasting station, and responds to the baseband signal generated at the same time as the content control data. When the encoded data is found, the encoded data is divided at a timing based on the content control data to generate a segment file.

ここで、ベースバンド信号を伝送したストリームデータ(言い換えると、IPストリーム伝送データ)と発火信号等のコンテンツ制御データは、別々に到着するため、その順序や同期は保証されない。そのため、コンテンツ配信システム200は、ストリームデータをエンコーダ220又はセグメンタ230に入力するタイミングを遅延させるためのバッファなどの遅延回路210を備えている。   Here, since the stream data (in other words, the IP stream transmission data) that transmitted the baseband signal and the content control data such as the ignition signal arrive separately, their order and synchronization are not guaranteed. Therefore, the content distribution system 200 includes a delay circuit 210 such as a buffer for delaying the timing of inputting stream data to the encoder 220 or the segmenter 230.

コンテンツ配信システム200は、遅延回路210により、コンテンツ制御データに含まれる必ず発火情報が先にセグメンタ230に到達して、それを基に遅れてくるエンコードデータを観察することにより、エンコードデータを分割して、セグメントファイルを生成することが可能になる。   The content distribution system 200 divides the encoded data by using the delay circuit 210 to ensure that the firing information included in the content control data arrives at the segmenter 230 first and observes the delayed encoded data based on the ignition information. Thus, a segment file can be generated.

図1に示す本発明の1つ実施形態では、エンコーダ220の前に遅延回路210として遅延回路を設けて、入力データとしてストリームデータを受け取って、入力データを予め決められた時間だけ遅らせて出力させているが、これに限定されるものではなく、遅延回路は、エンコーダの前後、セグメンタ内部など、セグメントファイルが生成される前であれば設置箇所は問わない。例えば、遅延回路は、エンコーダとセグメンタとの間に設けられ、入力データとしてエンコード後のデータ、すなわち、エンコードデータを受け取って、入力データを予め決められた時間だけ遅らせて出力させることもできる。   In one embodiment of the present invention shown in FIG. 1, a delay circuit is provided as a delay circuit 210 before an encoder 220 to receive stream data as input data and output the input data with a delay of a predetermined time. However, the present invention is not limited to this. The location of the delay circuit is not limited as long as it is before the generation of the segment file, such as before and after the encoder or inside the segmenter. For example, the delay circuit is provided between the encoder and the segmenter, and may receive encoded data, that is, encoded data, as input data, and output the input data with a delay of a predetermined time.

メディアセンターにおいて、セグメントファイルの中身を編集するのに比して、本発明の1つの実施形態に係るコンテンツ配信システム200により、セグメントファイルの差替え区間を指定して、差替え区間におけるセグメントファイルの差替えを行う場合には、対象のセグメントファイルの検出とファイル単位での入替えという簡易かつ効率的な方法で正確に差替えが可能となる。   In the media center, the content distribution system 200 according to one embodiment of the present invention specifies a segment file replacement section and performs replacement of the segment file in the replacement section in comparison with editing the contents of the segment file. When performing the replacement, accurate replacement can be performed by a simple and efficient method of detecting a target segment file and replacing the file in file units.

また、差替えについてファイルを書き換え交換することの他に、事前に差替え区間に相当する別ファイルを準備して、*.m3u8メタファイルの示すファイル名を当該別ファイルのファイル名に変更することにより、差替え区間におけるセグメントファイルを別のセグメントファイルに差替えて、視聴者には、差替えファイルを届けるという方法も可能であり効率的である。   In addition to rewriting and exchanging files for replacement, another file corresponding to the replacement section is prepared in advance, and *. It is also possible to replace the segment file in the replacement section with another segment file by changing the file name indicated by the m3u8 metafile to the file name of the different file, and to deliver the replacement file to the viewer. It is a target.

ここで、図1に示す本発明の1つの実施形態における各機能や各構成について説明する。タイムスタンプ付加信号遠隔伝送部110のタイムスタンプ付加信号遠隔伝送機能は、ベースバンド信号(音声)を入力として受け取る。ベースバンド信号(音声)は、アナログもしくはデジタル信号(PCM信号など)等である。タイムスタンプ付加信号遠隔伝送機能の出力は、IPパケットであり、パケット内部には、一定微小期間の音声信号と当該信号の発生した時刻が含まれ、発生時刻は、RTPプロトコルを用いてRTPヘッダに記述してもよい。   Here, each function and each configuration in one embodiment of the present invention shown in FIG. 1 will be described. The time stamp added signal remote transmission function of the time stamp added signal remote transmission unit 110 receives a baseband signal (voice) as an input. The baseband signal (audio) is an analog or digital signal (such as a PCM signal) or the like. The output of the timestamp-added signal remote transmission function is an IP packet, and the packet includes an audio signal for a fixed short period of time and the time when the signal is generated. The generation time is recorded in the RTP header using the RTP protocol. May be described.

付加情報伝送部120の付加情報伝送機能は、発火信号、CMのON/OFFデータなどのコンテンツ制御データを入力として受け取る。コンテンツ制御データは、本編カット・復帰制御情報(本編カット・復帰手動スイッチのON/OFF)である。付加情報伝送機能の出力は、IPパケットであり、スイッチON/OFFした時刻が含まれる。   The additional information transmission function of the additional information transmission unit 120 receives content control data such as a firing signal and CM ON / OFF data as inputs. The content control data is main part cut / return control information (ON / OFF of a main part cut / return manual switch). The output of the additional information transmission function is an IP packet, which includes the time when the switch was turned ON / OFF.

計時部130の計時機能は、OSのシステムクロックやリアルタイムクロックなどのシステムコールであり、時刻要求命令を入力として受けて、時刻を出力として返す。   The timekeeping function of the timekeeping unit 130 is a system call such as a system clock or a real-time clock of the OS, which receives a time request command as input and returns time as output.

遅延回路210は、例えば、プログラム中のFIFOバッファで実現可能である。遅延回路への入力は、タイムスタンプ付加信号遠隔伝送機能が出力するIPパケット群(ストリーム)の中身であり、時刻情報と一定微小期間の音声信号の組である。遅延回路210からの出力は、予め設定された一定時間(例えば、1秒〜数分)経過後の入力である。   The delay circuit 210 can be realized by, for example, a FIFO buffer in a program. The input to the delay circuit is the contents of an IP packet group (stream) output by the time stamp-added signal remote transmission function, and is a set of time information and an audio signal for a certain minute period. The output from the delay circuit 210 is an input after a predetermined period of time (for example, one second to several minutes) has elapsed.

エンコーダ220は、入力として、デジタル信号を受け取る。エンコーダ220の出力は、圧縮変換後の音声のデータである。   Encoder 220 receives a digital signal as input. The output of the encoder 220 is audio data after compression conversion.

コンテンツ配信システム200は、タイムスタンプ情報連携機能を備えており、タイムスタンプ情報連携機能は、エンコーダ220の遅延を計測もしくは補償して、エンコーダデータと、対応する信号の発生時刻(タイムスタンプ)を同期する機能である。当該機能は、タイムスタンプ付加信号遠隔伝送機能が出力するIPパケット群(ストリーム)の中身である、時刻情報と一定微小期間の音声信号の組等を受け取って、エンコードデータと対応するタイムスタンプの同期を保って、その組をセグメンタに引き渡す。   The content distribution system 200 includes a time stamp information linking function. The time stamp information linking function measures or compensates for the delay of the encoder 220, and synchronizes the encoder data with the generation time (time stamp) of the corresponding signal. Function. This function receives time information and a set of audio signals for a certain minute period, etc., which are the contents of an IP packet group (stream) output by the time stamp added signal remote transmission function, and synchronizes the encoded data with the corresponding time stamp. And hand over the pair to the segmenter.

任意タイミングでの分割制御機能付セグメンタ230は、第1の入力としてエンコードデータとタイムスタンプを受け取り、第2の入力として発火情報を受け取る。セグメンタ230の出力は、HLSファイル群(*.m3u8およびセグメントファイル群)であり、ただし、HLSファイル群には、放送局で発生したタイムスタンプが反映されており、なおかつ、図2に示すように、通常のセグメンタの分割ペース(一定のセグメント継続時間)に加えて、発火情報(コンテンツ制御データに基づくタイミング)に従って当該時刻でファイルが分割されている。   The segmenter with division control function 230 at an arbitrary timing receives the encoded data and the time stamp as the first input, and receives the firing information as the second input. The output of the segmenter 230 is an HLS file group (* .m3u8 and a segment file group). However, the HLS file group reflects a time stamp generated at a broadcasting station and, as shown in FIG. The file is divided at the time according to the firing information (timing based on the content control data) in addition to the normal segmenter division pace (constant segment duration).

図2は、コンテンツ制御データを用いた音声ストリームのセグメント化の概要を示す。図2では、ストリームデータとして音声ストリームを用いているが、これに限定されるものではなく、映像ストリーム等でもよい。図2に示されるように、従来のストリーミングにおけるセグメント化では、一定のセグメント継続時間のみで、放送用音声ストリームであるエンコードデータを分割して、セグメント継続時間ΔT(例えば、10秒)の長さのセグメントファイルを生成することができる。図2に示す横軸は時間軸であり、放送用音声ストリームは、セグメントファイル開始時間STm、STm+1、STm+2、STm+3(mは自然数)で分割されている。 FIG. 2 shows an outline of segmentation of an audio stream using content control data. Although an audio stream is used as the stream data in FIG. 2, the present invention is not limited to this, and may be a video stream or the like. As shown in FIG. 2, in segmentation in the conventional streaming, encoded data, which is a broadcast audio stream, is divided by only a fixed segment duration, and the segment duration ΔT (for example, 10 seconds) is used. Can be generated. The horizontal axis shown in FIG. 2 is a time axis, and the broadcast audio stream is divided by segment file start times ST m , ST m + 1 , ST m + 2 , and ST m + 3 (m is a natural number).

図2に示した、本発明のコンテンツ制御データを用いたセグメント化では、一定のセグメント継続時間ΔTに加えて、コンテンツ制御データに基づくタイミングでエンコードデータを分割して、セグメントファイル(例えば、SG104)を生成することができる。図2に示すように、コンテンツ制御データが、CMのON/OFFデータである場合には、CM開始時刻TTx(xは自然数)で放送用音声ストリームを分割して、通常よりも短い尺(STmからTTx)のセグメントファイル(SG105)を生成する。TTx以降の放送用音声ストリームは、一定のセグメント継続時間ΔTで分割されて、TTxからSTm+1の尺でセグメントファイル(SG106)が生成される。また、CM終了時刻TTx+1でも、同様に、放送用音声ストリームを分割して、STm+3からTTx+1の尺でセグメントファイルが生成される。 In the segmentation using the content control data of the present invention shown in FIG. 2, the encoded data is divided at a timing based on the content control data in addition to the fixed segment duration time ΔT, and the segment file (for example, SG104) Can be generated. 2, the content control data, in the case of ON / OFF data of the CM divides the broadcast audio stream CM start time TT x (x is a natural number), shorter than the normal length ( generating a segment file (SG105) of TT x) from ST m. TT x subsequent broadcast audio stream is divided at a certain segment duration [Delta] T, segment file (SG106) is generated from TT x at scale of ST m + 1. Also, at the CM end time TT x + 1 , similarly, the broadcast audio stream is divided, and a segment file is generated from ST m + 3 to TT x + 1 .

図3は、コンテンツ制御データを用いてセグメント化した際の音声ストリームのメタファイル(プレイリスト)の内容を示す。プレイリスト(m3u8ファイル)中のセグメントファイルSGn(nは自然数)に関する情報は2行からなり、1行目の“#EXTINF: ΔT”は次行(2行目)のセグメントファイルの長さを表わしている。2行目の“/ts/audio/xxx/ts/SG102”は、セグメントファイルのURLである。なお、図3には図示していないが、m3u8ファイルを用いた実施形態では、m3u8ファイルにセグメントファイルの開始時刻(dataTs)を記述することができる。 FIG. 3 shows the content of a metafile (playlist) of an audio stream when segmented using the content control data. The information on the segment file SG n (n is a natural number) in the playlist (m3u8 file) is composed of two lines. It represents. “/ Ts / audio / xxx / ts / SG102” on the second line is the URL of the segment file. Although not shown in FIG. 3, in the embodiment using the m3u8 file, the start time (dataTs) of the segment file can be described in the m3u8 file.

プレイリスト中の“#EXTINF: TTx-STm”“/ts/audio/xxx/ts/SG105”及び“#EXTINF: ΔT-(TTx-STm)”“/ts/audio/xxx/ts/SG106”は、セグメントファイルSG105生成時に発火信号を受け取った(STm<TTx<STm+ΔT)例(図2参照)を表しており、CM開始時刻(発火信号発生時刻)TTxで分割されたセグメントファイルSG105とSG106(図2参照)の長さとURLである。プレイリスト中のURLを書き換えることで、例えば、“/ts/audio/xxx/ts/SG106”を別のURLに変更し、CM終了時間TTx+1の前までの後続のセグメントファイルも、同様にURLを変更することで、CM等のコンテンツを別のコンテンツに差替えることができる。つまり、メタファイルに記録された1以上のセグメントファイルのURLを、別のセグメントファイルを指し示す新たなURLに書き換えることで、音声ストリーム(ストリームデータ)におけるコンテンツの一部を別の内容に差替えることができる。 “#EXTINF: TTx-STm” “/ ts / audio / xxx / ts / SG105” and “#EXTINF: ΔT- (TTx-STm)” “/ ts / audio / xxx / ts / SG106” in the playlist , received a firing signal at segment file SG105 generated (ST m <TT x <ST m + ΔT) example represents a (see FIG. 2), CM start time (ignition signal generation time) TTx in divided segment files SG105 And the length and URL of the SG 106 (see FIG. 2). By rewriting the URL in the playlist, for example, “/ ts / audio / xxx / ts / SG106” is changed to another URL, and the subsequent segment file before the CM end time TT x +1 is similarly changed. By changing the URL, it is possible to replace a content such as a CM with another content. That is, by replacing the URL of one or more segment files recorded in the metafile with a new URL indicating another segment file, a part of the content in the audio stream (stream data) is replaced with another content. Can be.

図4は、コンテンツ制御データを用いて音声ストリームをセグメント化する処理のシーケンス図である。当該処理は、例えば、コンテンツ配信システム200のセグメンタ230によって実行される。図4のシーケンス図では、セグメントコントローラ(Segment Controler)が、タイムキーパ(TimeKeeper)にセグメントファイルの継続可否を確認し(canContinue(ts)実行)、継続する場合(OPT continue = yes)は、セグメントファイルにエンコードデータを追記する(write(mmData)実行)。継続しない場合(OPT continue = no)は、HLSハンドラ(HlsHandler)にincrementHls(dataTs,mmData)指示を送り、セグメントファイルを切断した後、新しいセグメントファイルにエンコードデータを追記する(write(mmData)実行)。   FIG. 4 is a sequence diagram of a process of segmenting the audio stream using the content control data. This processing is executed by the segmenter 230 of the content distribution system 200, for example. In the sequence diagram of FIG. 4, the segment controller (Segment Controller) confirms whether or not the segment file can be continued with the time keeper (TimeKeeper) (executes canContinue (ts)). Add encoded data (write (mmData) execution). If not continued (OPT continue = no), incrementHls (dataTs, mmData) instruction is sent to the HLS handler (HlsHandler) to cut the segment file, and then add the encoded data to the new segment file (write (mmData) execution) .

タイムキーパ(TimeKeeper)は、セグメントコントローラからのセグメントファイル継続確認(canContinue(ts))に対して、セグメントファイルの分割を行う場合(コンテンツ制御データの発火時刻に対応する時刻のデータを発見した場合やセグメント継続時間ΔTの経過による)にnoを返し、分割せずにセグメントファイルを継続する場合にyesを返す。なお、TimeKeeper は、常時setCutTiming(cutTs)により、発火時刻(セグメントファイルの切断希望時刻)の登録を受け付けている。   The time keeper (TimeKeeper) divides the segment file in response to the segment file continuation confirmation (canContinue (ts)) from the segment controller (if the time data corresponding to the firing time of the content control data is found or the segment No is returned for the duration ΔT), and yes is returned when the segment file is continued without division. TimeKeeper always accepts registration of firing time (desired time of segment file cutting) by setCutTiming (cutTs).

セグメントコントローラは、セグメントファイルを分割する場合(OPT continue = no)に、HLSハンドラにincrementHls(dataTs,mmData)指示を送る。   When dividing the segment file (OPT continue = no), the segment controller sends an incrementHls (dataTs, mmData) instruction to the HLS handler.

HLSハンドラは、updateM3u8(dataTs, FileName)を実行して、現在書き込み中のセグメントファイルの情報をプレイリストに書き込み、ファイルハンドラ(FileHandler)にincrement(newFileName)指示を送る。   The HLS handler executes updateM3u8 (dataTs, FileName) to write the information of the segment file currently being written to the playlist, and sends an increment (newFileName) instruction to the file handler (FileHandler).

ファイルハンドラは、closeOld()を実行してオープン中のセグメントファイルをクローズし、さらに、createNew()を実行して次のセグメントファイルをオープンする。図4に示す処理により、図2に示すように、放送用音声ストリーム(エンコードデータ)を分割して保存した複数のセグメントファイルが生成される。   The file handler executes closeOld () to close the open segment file, and then executes createNew () to open the next segment file. By the process shown in FIG. 4, as shown in FIG. 2, a plurality of segment files in which the broadcast audio stream (encoded data) is divided and stored is generated.

図5は、音声ストリームのセグメント化の変形例を示す概念図である。上から1段目と2段目、すなわち、従来のストリーミングにおけるセグメント化、及び本発明のコンテンツ制御データを用いたセグメント化(a1)は、図2に示すセグメント化と同じであり、既に説明したとおりである。   FIG. 5 is a conceptual diagram showing a modification of the segmentation of the audio stream. The first and second stages from the top, that is, the segmentation in the conventional streaming and the segmentation (a1) using the content control data of the present invention are the same as the segmentation shown in FIG. 2 and have already been described. It is as follows.

本発明のコンテンツ制御データ(発火信号)を用いたセグメント化の1つの変形例(a2)は、ベースとなる分割タイミング(STm)と、発火信号(TTx)の両方で放送用音声ストリーム(エンコードデータ)を分割して、TTx前にできた小さなファイルを前のセグメントファイル(SG104)にマージすることができる。つまり、変形例(a2)は、コンテンツ制御データに基づくタイミング(TTx)で、エンコードデータを分割した際に、コンテンツ制御データに基づくタイミング(TTx)よりも前に生成されたセグメントファイルを、直前のセグメントファイル(SG104)にマージすることができる。 One variation of segmentation using the content control data (ignition signal) of the present invention (a2) includes a base and made division timing (ST m), broadcast audio stream in both the firing signal (TT x) ( encoded data) is divided and can be merged small files made before TT x to the previous segment file (SG104). In other words, variation (a2) at the timing (TT x) based on the content control data, upon dividing the encoded data, the segment files generated before the timing (TT x) based on the content control data, It can be merged with the immediately preceding segment file (SG104).

別の変形例(b1)は、発火信号(TTx)で放送用音声ストリーム(エンコードデータ)を分割した場合には、その後は、次の発火信号(TTx+1)を受け取るまで、一定の分割タイミングの時間間隔であるセグメント継続時間ΔT毎に、後続のエンコードデータを分割してセグメントファイル(SG106、SG107等)を生成することができる。言い換えると、別の変形例(b1)は、コンテンツ制御データ(発火信号)に基づくタイミング(TTx)で、エンコードデータを分割した際に、コンテンツ制御データに基づくタイミング(TTx)よりも前に生成されたセグメントファイル(SG105)の時間(TTx−STm)だけ、一定のセグメント継続時間((TTx−STm)+STm+1)を遅らせて、コンテンツ制御データに基づくタイミング(TTx)よりも後のエンコードデータを、遅らせた一定のセグメント継続時間((TTx−STm)+STm+1)で分割して、セグメントファイル(SG106、SG107等)を生成することができる。 Another modification (b1) is that, when the broadcast audio stream (encoded data) is divided by the firing signal (TT x ), the broadcast audio stream (TT x ) is kept constant until the next firing signal (TT x + 1 ) is received. Subsequent encoded data can be divided into segment files (SG106, SG107, etc.) for each segment duration ΔT, which is the time interval of the division timing. In other words, another modified example (b1) has a timing (TT x ) based on the content control data (ignition signal), and when the encoded data is divided, before the timing (TT x ) based on the content control data. only generated segment file (SG105) time (TT x -ST m), certain segments duration ((TT x -ST m) + ST m + 1) a delayed timing based on the content control data (TT x encoded data later than), it is divided at a certain segment duration delayed ((TT x -ST m) + ST m + 1), can generate a segment file (SG106, SG107, etc.).

さらに別の変形例(b2)は、変形例(a2)と変形例(b1)を組み合わせたものである。つまり、ベースとなる分割タイミング(STm)と、発火信号(TTx)の両方で放送用音声ストリーム(エンコードデータ)を分割して、TTx前にできた小さなファイルを前のセグメントファイル(SG104)にマージすることと、発火信号(TTx)で放送用音声ストリーム(エンコードデータ)を分割した場合には、その後は、次の発火信号(TTx+1)を受け取るまで、一定の分割タイミングの時間間隔であるセグメント継続時間ΔT毎に、後続のエンコードデータを分割してセグメントファイル(SG105、SG106等)を生成することの両方を行うものである。 Still another modification (b2) is a combination of the modification (a2) and the modification (b1). That is, the broadcast audio stream (encoded data) is divided by both the base division timing (ST m ) and the firing signal (TT x ), and the small file created before TT x is divided into the previous segment file (SG104). ), And when the broadcast audio stream (encoded data) is divided by the firing signal (TT x ), thereafter, a fixed division timing is received until the next firing signal (TT x + 1 ) is received. For each segment continuation time ΔT, which is the time interval of, the subsequent encoding data is divided to generate segment files (SG105, SG106, etc.).

図6は、音声ストリームのセグメント化のさらに別の変形例を示す概念図である。別の変形例(c)は、ベースとなる分割タイミング(STm)と、発火信号(TTx+1)の両方で放送用音声ストリーム(エンコードデータ)を分割して、TTx+1後にできた小さなファイルを、その小さなファイルの直後のセグメントファイル(SG109)にマージすることができる。言い換えると、CM終了のタイミング(TTx+1)後に、ベースとなる分割タイミング(STm+3)とで生成されたセグメントファイル(本編ファイル、中段に示すSG109)が小さい場合(例えば、当該セグメントファイル(本編ファイル)が、通常のセグメント継続時間ΔTの半分に満たないセグメント継続時間となる場合など)に、直後のセグメントファイル(中段に示すSG110)にマージして、大きなセグメントファイル(下段に示すSG109)を生成することができる。 FIG. 6 is a conceptual diagram showing still another modification of the segmentation of the audio stream. Another modification (c) is that the broadcast audio stream (encoded data) is divided by both the base division timing (ST m ) and the firing signal (TT x + 1 ), and the division is made after TT x + 1. The small file can be merged with the segment file (SG109) immediately after the small file. In other words, when the segment file (main part file, SG109 shown in the middle) generated at the base division timing (ST m + 3 ) after the CM end timing (TT x + 1 ) is small (for example, The file (main file) has a segment duration less than half of the normal segment duration ΔT, and is merged with the immediately following segment file (SG110 shown in the middle) to form a large segment file (shown in the lower). SG109) can be generated.

以上のとおり、本発明のコンテンツ配信システムは、リアルタイムに広告等の特定コンテンツの差替え配信において、差替えが必要な区間に応じて、セグメントファイルの尺を柔軟に変えることができるため、コンテンツの乱れの無い時点で、コンテンツの差替えが可能となる。これにより、メディアセンター(例えば、IPラジオ配信事業者)は、自動的に広告等のコンテンツを差替えて配信するサービスを行うことができ、放送事業者にとっては、放送局でCM等のコンテンツの差替えを個々に行う必要がなく運用業務を効率化することができる。   As described above, the content distribution system of the present invention can flexibly change the length of the segment file in accordance with the section requiring replacement in the replacement delivery of specific content such as advertisements in real time. At the point when there is no such content, the content can be replaced. As a result, the media center (for example, an IP radio distribution company) can perform a service of automatically replacing and distributing contents such as advertisements, and the broadcasting company can replace a content such as CM at a broadcasting station. It is not necessary to perform the operations individually, and the operation work can be made efficient.

図2、図5及び図6に示す実施例では、CMの切り替えを例に説明しているが、CM以外にも中継番組と自局番組との切り替えにも適用できる。その他、システム構成、遠隔局の構成、取り扱うデジタル放送信号の種類、切り替え手順等についても、この発明の要旨を逸脱しない範囲で種々変形して実施できる。コンテンツ制御データとして、CMのONおよびOFFの情報としているが、CMのON時刻とCMコンテンツの時間でもCMのOFF時刻がわかるので、これを利用した分割を行っても良い。   In the embodiments shown in FIGS. 2, 5 and 6, switching of CMs is described as an example, but the present invention can be applied to switching between a relay program and a local station program in addition to CMs. In addition, the system configuration, the configuration of the remote station, the type of digital broadcast signal to be handled, the switching procedure, and the like can be variously modified without departing from the scope of the present invention. The content control data is the information on the ON and OFF of the CM. However, since the OFF time of the CM can be known from the ON time of the CM and the time of the CM content, division using this may be performed.

発火信号は、放送局で一般的な電気的スイッチ(接点)による信号であるが、これは必須ではなくこの方式に限定するものではない。放送局等であるコンテンツ提供者が、発火情報を内包したIPパケットを発信してもよい。また、放送局が切り替え可能区間の音声もしくは切替えタイミングに不可視、不可聴の印を埋め込んでおいて、セグメンタに至る経路のどこかで当該タイミングを検出して、セグメンタに引き渡してもよい。この場合、任意タイミングでの分割制御機能付セグメンタに適した発火信号の形式で情報を引き渡せるように、その前段に各種形式の発火情報を集約変換する調停回路(機能)を設けることとなる。   The firing signal is a signal generated by an electrical switch (contact) generally used in a broadcasting station, but is not essential and is not limited to this method. A content provider such as a broadcasting station may transmit an IP packet containing ignition information. Alternatively, the broadcast station may embed an invisible or inaudible mark in the sound or the switching timing of the switchable section, detect the timing somewhere along the route to the segmenter, and pass it to the segmenter. In this case, an arbitration circuit (function) for integrating and converting various types of firing information is provided at the preceding stage so that information can be delivered in the form of a firing signal suitable for the segmenter with the division control function at an arbitrary timing.

なお、本発明の1つの実施形態に係るコンテンツ配信システムでは、例えば、コンテンツ配信係る各種プログラムは、記憶装置に記憶され、これらのプログラムは、制御部(CPU)、メモリ等)により必要に応じて読み出されてRAMに移され、CPUに読み出されて実行される。このように、コンピュータにコンテンツ配信に係る各種プログラムを実行させることで、コンピュータをコンテンツ配信システムとして機能させることができる。また、コンテンツ配信システムの少なくとも一部の機能を、特定用途向け集積回路(ASIC)等でハードウェア的に実装することも可能である。   In the content distribution system according to one embodiment of the present invention, for example, various programs related to content distribution are stored in a storage device, and these programs are controlled by a control unit (CPU), a memory, or the like as necessary. The data is read and transferred to the RAM, and read and executed by the CPU. In this way, by causing a computer to execute various programs related to content distribution, the computer can function as a content distribution system. Further, at least a part of the function of the content distribution system can be implemented in hardware by an application specific integrated circuit (ASIC) or the like.

本発明に係るコンテンツ配信システム等は、放送局(ラジオ局など)のコンテンツ提供者から転送されるコンテンツ(例えば、ラジオコンテンツ)を中継配信するメディアセンターにおいて、個々の放送局固有のシステムに依拠せずに、コンテンツの特定の部分(例えば、CM部分)を差替えることに利用することである。   A content distribution system or the like according to the present invention relies on a system unique to each broadcast station in a media center that relays and distributes content (for example, radio content) transferred from a content provider of a broadcast station (radio station or the like). Instead, it is used to replace a specific part (for example, a CM part) of the content.

100 局側配信装置
110 タイムスタンプ付加信号遠隔伝送部
120 付加情報伝送部
130 計時部
200 コンテンツ配信システム
210 遅延回路
220 エンコーダ
230 セグメンタ
800 局側配信装置
805 信号遠隔伝送部
810 タイムスタンプ付加信号遠隔伝送部
820 付加情報伝送部
830 計時部
900 コンテンツ配信システム
910 エンコーダ
920 セグメンタ
REFERENCE SIGNS LIST 100 Station-side distribution device 110 Time stamp-added signal remote transmission unit 120 Additional information transmission unit 130 Clock unit 200 Content distribution system 210 Delay circuit 220 Encoder 230 Segmenter 800 Station-side distribution device 805 Signal remote transmission unit 810 Time stamp-added signal remote transmission unit 820 additional information transmission unit 830 clock unit 900 content distribution system 910 encoder 920 segmenter

Claims (11)

ストリームデータをエンコードしてエンコードデータを生成するエンコーダと、
前記エンコードデータを一定のセグメント継続時間で分割してセグメントファイルを生成するセグメンタと、
前記ストリームデータ又は前記エンコードデータを入力データとして受け取り、前記入力データを遅延させて出力する遅延回路と、
を含み、
前記セグメンタは、コンテンツ制御データを受信し、
前記ストリームデータ及び前記コンテンツ制御データには、同一の計時機能によりタイムスタンプが付与され、
前記セグメンタは、前記コンテンツ制御データの発生時刻と同一時刻に発生したベースバンド信号に対応するエンコードデータを発見した場合に、前記エンコードデータを前記コンテンツ制御データに基づくタイミングで分割して、セグメントファイルを生成すること
を特徴とするコンテンツ配信システム。
An encoder that encodes the stream data to generate encoded data;
A segmenter that divides the encoded data at a constant segment duration to generate a segment file;
A delay circuit that receives the stream data or the encoded data as input data, and delays and outputs the input data;
Including
The segmenter receives content control data,
The stream data and the content control data are provided with a time stamp by the same clock function,
The segmenter, when finding encoded data corresponding to a baseband signal generated at the same time as the occurrence time of the content control data, divides the encoded data at a timing based on the content control data, and divides the segment file. A content distribution system characterized by generating.
前記遅延回路は、前記エンコーダよりも前に設けられ、前記入力データとして前記ストリームデータを受け取ること
を特徴とする請求項1に記載のコンテンツ配信システム。
The content distribution system according to claim 1, wherein the delay circuit is provided before the encoder, and receives the stream data as the input data.
前記遅延回路は、前記エンコーダと前記セグメンタとの間に設けられ、前記入力データとして前記エンコードデータを受け取ること
を特徴とする請求項1又は2に記載のコンテンツ配信システム。
The content delivery system according to claim 1, wherein the delay circuit is provided between the encoder and the segmenter, and receives the encoded data as the input data.
前記コンテンツ制御データは、前記ストリームデータにおけるコンテンツを差替えるための発火信号又は前記ストリームデータにおけるCMのON/OFFデータであること
を特徴とする請求項1から3のいずれか1項に記載のコンテンツ配信システム。
The content according to any one of claims 1 to 3, wherein the content control data is an ignition signal for replacing content in the stream data or ON / OFF data of a CM in the stream data. Delivery system.
前記セグメンタは、前記コンテンツ制御データに基づくタイミングで、前記エンコードデータを分割した際に、前記コンテンツ制御データに基づくタイミングよりも前に生成されたセグメントファイルを、直前のセグメントファイルにマージすること
を特徴とする請求項1から4のいずれか1項に記載のコンテンツ配信システム。
When the encoded data is divided at a timing based on the content control data, the segmenter merges a segment file generated before the timing based on the content control data with a previous segment file. The content distribution system according to any one of claims 1 to 4, wherein:
前記セグメンタは、前記コンテンツ制御データに基づくタイミングで、前記エンコードデータを分割した際に、次のコンテンツ制御データを受け取るまで、後続のエンコードデータを前記一定のセグメント継続時間で分割してセグメントファイルを生成すること
を特徴とする請求項1から4のいずれか1項に記載のコンテンツ配信システム。
When the encoded data is divided at the timing based on the content control data, the segmenter generates a segment file by dividing subsequent encoded data at the fixed segment duration until receiving the next content control data. The content distribution system according to any one of claims 1 to 4, wherein
前記セグメンタは、前記コンテンツ制御データに基づくタイミングで、前記エンコードデータを分割した際に、前記コンテンツ制御データに基づくタイミングよりも前に生成されたセグメントファイルを、直前のセグメントファイルにマージし、
前記セグメンタは、前記コンテンツ制御データに基づくタイミングで、前記エンコードデータを分割した際に、前記コンテンツ制御データに基づくタイミングよりも前に生成されたセグメントファイルの時間だけ前記一定の分割タイミングを遅らせ、
前記コンテンツ制御データに基づくタイミングよりも後の前記エンコードデータを、遅らせた前記一定の分割タイミングで分割して、セグメントファイルを生成すること
を特徴とする請求項1から4のいずれか1項に記載のコンテンツ配信システム。
The segmenter, at the timing based on the content control data, when the encoded data is divided, the segment file generated before the timing based on the content control data, merged with the previous segment file,
The segmenter, at the timing based on the content control data, when dividing the encoded data, delays the fixed division timing by the time of the segment file generated before the timing based on the content control data,
5. The segment file according to claim 1, wherein the encoded data after the timing based on the content control data is divided at the constant divided timing that is delayed to generate a segment file. Content distribution system.
前記セグメンタは、前記コンテンツ制御データに基づくタイミングで、前記エンコードデータを分割した際に、前記コンテンツ制御データに基づくタイミングよりも後に生成されたセグメントファイルを、該セグメントファイルの直後のセグメントファイルにマージすること
を特徴とする請求項1から4のいずれか1項に記載のコンテンツ配信システム。
When the encoded data is divided at a timing based on the content control data, the segmenter merges a segment file generated after the timing based on the content control data into a segment file immediately after the segment file. The content distribution system according to any one of claims 1 to 4, wherein:
前記セグメンタは、生成された1以上のセグメントファイルの時間的な長さ及びURLを記録したメタファイルを生成すること
を特徴とする請求項1から8のいずれか1項に記載のコンテンツ配信システム。
The content distribution system according to any one of claims 1 to 8, wherein the segmenter generates a metafile in which a time length and a URL of one or more generated segment files are recorded.
前記メタファイルに記録された1以上のセグメントファイルのURLを、別のセグメントファイルを指し示す新たなURLに書き換えることで、前記ストリームデータにおけるコンテンツの一部を別の内容に差替えること
を特徴とする請求項9に記載のコンテンツ配信システム。
A part of the content in the stream data is replaced with another content by rewriting the URL of one or more segment files recorded in the metafile to a new URL pointing to another segment file. The content distribution system according to claim 9.
コンピュータによって実行させることで、前記コンピュータを請求項1から10のいずれか1項に記載のコンテンツ配信システムとして機能させることを特徴とするプログラム。   A program that causes a computer to function as the content distribution system according to any one of claims 1 to 10 by being executed by the computer.
JP2018144938A 2018-08-01 2018-08-01 Stream distribution system and program with segment file division function Active JP7162295B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018144938A JP7162295B2 (en) 2018-08-01 2018-08-01 Stream distribution system and program with segment file division function

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018144938A JP7162295B2 (en) 2018-08-01 2018-08-01 Stream distribution system and program with segment file division function

Publications (2)

Publication Number Publication Date
JP2020022082A true JP2020022082A (en) 2020-02-06
JP7162295B2 JP7162295B2 (en) 2022-10-28

Family

ID=69588759

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018144938A Active JP7162295B2 (en) 2018-08-01 2018-08-01 Stream distribution system and program with segment file division function

Country Status (1)

Country Link
JP (1) JP7162295B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7356663B2 (en) 2021-03-17 2023-10-05 株式会社インフォシティ Broadcasting service communication network distribution apparatus and method

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008529338A (en) * 2005-01-20 2008-07-31 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Automatic generation of trailers including product placement
JP2013517676A (en) * 2010-01-18 2013-05-16 テレフオンアクチーボラゲット エル エム エリクソン(パブル) Method and apparatus for HTTP media stream delivery
JP2016213684A (en) * 2015-05-08 2016-12-15 株式会社リクルートホールディングス Content distribution system
WO2017047424A1 (en) * 2015-09-17 2017-03-23 ソニー株式会社 Transmission device, receiving device, and data processing method
JP6254500B2 (en) * 2014-09-08 2017-12-27 株式会社メディアプラットフォームラボ Content distribution system, content distribution method, and content distribution program
US20180014041A1 (en) * 2016-07-07 2018-01-11 Time Warner Cable Enterprises Llc Apparatus and methods for presentation of key frames in encrypted content
JP2018113568A (en) * 2017-01-11 2018-07-19 キヤノン株式会社 Transmission device, transmission method, and program

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008529338A (en) * 2005-01-20 2008-07-31 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Automatic generation of trailers including product placement
JP2013517676A (en) * 2010-01-18 2013-05-16 テレフオンアクチーボラゲット エル エム エリクソン(パブル) Method and apparatus for HTTP media stream delivery
JP6254500B2 (en) * 2014-09-08 2017-12-27 株式会社メディアプラットフォームラボ Content distribution system, content distribution method, and content distribution program
JP2016213684A (en) * 2015-05-08 2016-12-15 株式会社リクルートホールディングス Content distribution system
WO2017047424A1 (en) * 2015-09-17 2017-03-23 ソニー株式会社 Transmission device, receiving device, and data processing method
US20180014041A1 (en) * 2016-07-07 2018-01-11 Time Warner Cable Enterprises Llc Apparatus and methods for presentation of key frames in encrypted content
JP2018113568A (en) * 2017-01-11 2018-07-19 キヤノン株式会社 Transmission device, transmission method, and program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7356663B2 (en) 2021-03-17 2023-10-05 株式会社インフォシティ Broadcasting service communication network distribution apparatus and method
JP7394366B2 (en) 2021-03-17 2023-12-08 株式会社インフォシティ Broadcasting service communication network distribution apparatus and method

Also Published As

Publication number Publication date
JP7162295B2 (en) 2022-10-28

Similar Documents

Publication Publication Date Title
US10820065B2 (en) Service signaling recovery for multimedia content using embedded watermarks
EP2409475B1 (en) Delivering cacheable streaming media presentations
CN105765987B (en) Timeline information is set to be mutually related system and method between Media Stream
EP1398931B1 (en) Synchronous play-out of media data packets
US11095929B2 (en) Video distribution synchronization
TWI716018B (en) Dynamic reduction in playout of replacement content to help align end of replacement content with end of replaced content
CN110933449B (en) Method, system and device for synchronizing external data and video pictures
TWI760981B (en) Dynamic playout of transition frames while transitioning between playout of media streams
EP3047653B1 (en) Correlating timeline information between media streams
Van Deventer et al. Standards for multi-stream and multi-device media synchronization
WO2014208377A1 (en) Content supply device, content supply method, program, terminal device, and content supply system
EP3179646A1 (en) Synchronisation device, method, program and system
US10547915B1 (en) System and method for optimizing playlist information for ultra low latency live streaming
JP7162295B2 (en) Stream distribution system and program with segment file division function
KR102202597B1 (en) A method and apparatus for providing a broadcast service based on a heterogenous network
JP4042396B2 (en) Data communication system, data transmission apparatus, data reception apparatus and method, and computer program
Montagud et al. Introduction to media synchronization (MediaSync)
Sithu et al. Media synchronization control in multimedia communication
US11818188B2 (en) Synchronizing content and control signals using jitter buffer
JP7201656B2 (en) Caption generation device and caption generation program
Kanellopoulos Group synchronization for multimedia systems
WO2015012140A1 (en) Content supply device, content supply method, program, terminal device, and content supply system
WO2021140949A1 (en) Content delivery system, content delivery method, and program
JP6178893B1 (en) Unicast delivery apparatus, playback synchronization system, unicast delivery method, and unicast delivery program
Montagut Climent Design, development and evaluation of an adaptive and standardized RTP/RTCP-based IDMS solution

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210730

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220420

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220509

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220701

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20220701

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20220701

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20220704

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220725

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221004

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221007

R150 Certificate of patent or registration of utility model

Ref document number: 7162295

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150