JP2022133163A - Content generation device, reception device, and program - Google Patents

Content generation device, reception device, and program Download PDF

Info

Publication number
JP2022133163A
JP2022133163A JP2021032098A JP2021032098A JP2022133163A JP 2022133163 A JP2022133163 A JP 2022133163A JP 2021032098 A JP2021032098 A JP 2021032098A JP 2021032098 A JP2021032098 A JP 2021032098A JP 2022133163 A JP2022133163 A JP 2022133163A
Authority
JP
Japan
Prior art keywords
segment
media
initialization
manifest
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021032098A
Other languages
Japanese (ja)
Inventor
敏 西村
Satoshi Nishimura
千草 袴田
Chigusa Hakamada
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Broadcasting Corp
Original Assignee
Nippon Hoso Kyokai NHK
Japan Broadcasting Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Hoso Kyokai NHK, Japan Broadcasting Corp filed Critical Nippon Hoso Kyokai NHK
Priority to JP2021032098A priority Critical patent/JP2022133163A/en
Publication of JP2022133163A publication Critical patent/JP2022133163A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

To recognize a change of a generation parameter during streaming content reproduction.SOLUTION: A content generation device 2 comprises: a media segment generation section 23 which generates a media segment in accordance with a generation parameter to be used for generating a segment of a video content; an initialization segment generation section 24 which generates a new initialization segment including information required for decoding the media segment in accordance with the change of the generation parameter; a manifest generation section 25 which generates a manifest file including segment correspondence information indicating a corresponding initialization segment for each media segment; and a content transmission section 26 which transmits the media segment, the initialization segment and the manifest file.SELECTED DRAWING: Figure 2

Description

本発明は、コンテンツ生成装置、受信装置、及びプログラムに関する。 The present invention relates to a content generation device, a reception device, and a program.

昨今のインターネットにおけるストリーミング動画配信では、汎用的なWebサーバによりHTTPプロトコルを用いてストリーミング配信する方式が主流となっている。このようなHTTPプロトコルによるストリーミング配信方式(アダプティブストリーミング)の一例としては、国際標準規格のMPEG-DASH(ISO/IEC23009-1)がある。 In recent streaming video distribution on the Internet, a method of streaming distribution using the HTTP protocol by a general-purpose Web server has become mainstream. MPEG-DASH (ISO/IEC23009-1), which is an international standard, is an example of such a streaming delivery method (adaptive streaming) based on the HTTP protocol.

MPEG-DASHでは、Webサーバに、初期化セグメント、メディアセグメント、及びそれらのURLや動画コンテンツの属性を記述したマニフェストファイルを用意する。メディアセグメントは、動画コンテンツを一つ又は複数の品質(画面サイズやビットレート等のパラメータ)でエンコードしたストリームをそれぞれ数秒から数十秒程度のファイルに分割したセグメントである。初期化セグメントは、符号化や暗号化等に関する生成パラメータ等、セグメントの提示に必要なメタデータを含む。受信装置は、マニフェストファイルから当該受信装置の画面サイズや伝送路のネットワーク帯域の状態等を考慮して、適時品質を選択して次々とセグメントを受信し、1本の動画コンテンツにつなぎ合わせて再生する(例えば、非特許文献1参照)。 In MPEG-DASH, a Web server is provided with a manifest file that describes initialization segments, media segments, their URLs, and video content attributes. A media segment is a segment obtained by dividing a stream of video content encoded with one or more qualities (parameters such as screen size and bit rate) into files of several seconds to several tens of seconds each. The initialization segment contains metadata necessary to present the segment, such as generation parameters for encoding, encryption, and so on. From the manifest file, the receiving device takes into consideration the screen size of the receiving device and the state of the network bandwidth of the transmission path, selects the quality at the appropriate time, receives segments one after another, and joins them into a single video content for playback. (see, for example, Non-Patent Document 1).

動画のストリーミングサービスの提供方法として、上記の品質切り替えに加え、マルチビュー映像・多言語音声配信や、放送のように編成に従った番組配信等が考えられる。MPEG-DASHにおいては、このようなサービスを可能とするマニフェストの記述方法が定義されている。 In addition to the above-mentioned quality switching, as a method of providing a video streaming service, multi-view video/multilingual audio distribution, program distribution according to organization like broadcasting, and the like are conceivable. MPEG-DASH defines a manifest description method that enables such services.

図7にMPEG-DASHのMPD(Media Presentation Description)形式のマニフェストファイルの概念図を示す。MPD形式ではPeriod,AdaptationSet,Representationの順に階層構造となっている。Periodはコンテンツを時間方向に区切った一区画を示しており、図7の例では、それぞれのメディア尺(duration)が300秒のPeriodが連結されていることを示している。Periodは1つ又は複数のAdaptationSetから構成される。 FIG. 7 shows a conceptual diagram of a manifest file in MPD (Media Presentation Description) format of MPEG-DASH. The MPD format has a hierarchical structure in the order of Period, AdaptationSet, and Representation. A period indicates one section in which content is divided in the time direction, and the example in FIG. 7 indicates that periods each having a media duration of 300 seconds are connected. A Period consists of one or more AdaptationSets.

AdaptationSetはメディアコンポーネント(映像、音声、テキスト等)の情報を示しており、同じメディア形式で表現(別角度の映像、別言語の音声等)の異なる複数のコンポーネントを含むことができる。図7の例では映像(mimeType=video/mp4)が2つ、音声(mimeType=audio/mp4)が1つである。AdaptationSetに含まれるそれぞれのメディアコンポーネントの情報はRepresentationで示される。 AdaptationSet indicates information of media components (video, audio, text, etc.), and can include a plurality of components with different expressions (video from another angle, audio in another language, etc.) in the same media format. In the example of FIG. 7, there are two videos (mimeType=video/mp4) and one audio (mimeType=audio/mp4). Information of each media component included in AdaptationSet is indicated by Representation.

Representationには、メディア要素を構成する実データであるセグメント(Initialization Segment,Media Segment)の情報が記述されている。Initialization Segmentは初期化セグメントを示し、Media Segmentはメディアセグメントを示している。図7の例では、メディアセグメントのファイル名は、セグメント長(duration=5s)ごとにシーケンス番号($Number$)がインクリメントされたものとなる。 Information of a segment (Initialization Segment, Media Segment), which is actual data constituting a media element, is described in Representation. Initialization Segment indicates an initialization segment, and Media Segment indicates a media segment. In the example of FIG. 7, the file name of the media segment is obtained by incrementing the sequence number ($Number$) for each segment length (duration=5s).

このようなマニフェストファイルとすることで、Periodにおいて選択されたメディアコンポーネント(AdaptationSet)を形成するセグメント(初期化セグメント及びメディアセグメント)を順次受信することが可能となるほか、メディアコンポーネントを選択し直すことにより別のメディアコンポーネントを形成するセグメントの受信に切り替え、別映像を表示することが可能となる。 With such a manifest file, it is possible to sequentially receive the segments (initialization segment and media segment) forming the media component (AdaptationSet) selected in the Period, and to reselect the media component. allows switching to reception of segments forming another media component and displaying another video.

また、非特許文献2には、一つのAdaptationSetに含まれる全Representationの生成パラメータを含む共通の初期化セグメントを用意することで、AdaptationSet内では最初に共通の初期化セグメントを挿入するのみで、Representationの切り替え時に毎回初期化セグメントを挿入することなくアダプティブストリーミングを実現する手法が開示されている。 In addition, in Non-Patent Document 2, by preparing a common initialization segment that includes generation parameters for all Representations included in one AdaptationSet, only inserting a common initialization segment at the beginning in the AdaptationSet allows Representation A method is disclosed for realizing adaptive streaming without inserting an initialization segment every time switching is performed.

また、特許文献1には、ビットレートの異なるストリームへの切り替え前後のピクチャを参照画像として生成したストリームにより切り替え後のストリームの一部を置換して配信ストリームを生成することにより、ストリームの切り替え前後の画質の変化を抑制する手法が開示されている。 In addition, in Patent Document 1, by generating a distribution stream by replacing a part of a stream after switching with a stream generated as a reference image from pictures before and after switching to a stream with a different bit rate, A technique for suppressing changes in the image quality of the image is disclosed.

特開2015-19329号公報JP 2015-19329 A

“次世代動画配信技術「MPEG-DASH」技術概要と標準化・関連技術動向”,映像情報メディア学会誌,Vol.67, No.2, 2013, p.109-115“Next Generation Video Distribution Technology ``MPEG-DASH'' Technical Overview and Standardization/Related Technology Trends”, Journal of the Institute of Image Information and Television Engineers, Vol.67, No.2, 2013, p.109-115 “Digital Video Broadcasting (DVB); MPEG-DASH Profile for Transport of ISO BMFF Based DVB Services over IP Based Networks - DVB Document A168”、[online]、2019年10月、[2021年2月22日検索]、インターネット<URL:https://dvb.org/wp-content/uploads/2019/12/a168_dvb_mpeg-dash_oct_2019.pdf>"Digital Video Broadcasting (DVB); MPEG-DASH Profile for Transport of ISO BMFF Based DVB Services over IP Based Networks - DVB Document A168", [online], October 2019, [searched on February 22, 2021], Internet <URL: https://dvb.org/wp-content/uploads/2019/12/a168_dvb_mpeg-dash_oct_2019.pdf>

図8は、受信装置におけるバッファの概念を示す図である。受信装置は、生成パラメータの異なるストリーム(Representation)に切り替える際には、図8に示すように、切り替え先のRepresentationに属するメディアセグメントをバッファに挿入する直前に、切り替え先のRepresentationの初期化セグメントを挿入する。これにより、後続するメディアセグメントの生成パラメータを適切にバッファの後段のデコーダに通知することができるため、シームレスなアダプティブストリーミングを実現することができる。なお、図8において、各品質のメディアセグメントはそれぞれ3つのブロックで構成されているが、1つのブロックが1つのRepresentationに対応している。 FIG. 8 is a diagram showing the concept of buffers in the receiving device. When switching to a stream (Representation) with a different generation parameter, the receiving device inserts the initialization segment of the switching destination Representation immediately before inserting media segments belonging to the switching destination Representation into the buffer, as shown in FIG. insert. As a result, it is possible to appropriately notify the subsequent decoder of the buffer of the generation parameters of the subsequent media segment, so that seamless adaptive streaming can be realized. In FIG. 8, each quality media segment is composed of three blocks, and one block corresponds to one Representation.

しかし、MPEG-DASHの規格では、図7に示したように、一つのRepresentation内には一つの初期化セグメントの情報しか記述できなかった。そのため、受信装置が一つのRepresentationを再生している最中に、該Representationに記述された初期化セグメントの生成パラメータが変更された場合には、受信装置はその内容と変更タイミングを認識することができなかった。 However, in the MPEG-DASH standard, as shown in FIG. 7, only one initialization segment information can be described in one Representation. Therefore, if the generation parameter of the initialization segment described in the Representation is changed while the receiving device is reproducing one Representation, the receiving device can recognize the content and change timing. could not.

また、非特許文献2に記載の技術を用いても、Representationの再生途中における生成パラメータの変更を受信装置が認識することはできない。また、特許文献1に記載の技術は、解像度や暗号鍵の変更といった生成パラメータの変更に必ずしも適用できる技術ではない。 Also, even if the technology described in Non-Patent Document 2 is used, the receiving device cannot recognize the change of the generation parameter during the reproduction of the Representation. Further, the technique described in Patent Document 1 is not necessarily applicable to changing generation parameters such as changing resolution and encryption key.

かかる事情に鑑みてなされた本発明の目的は、受信装置において、ストリーミングコンテンツ再生中の生成パラメータの変更を認識できるようにすることにより、安定したストリーミングを継続することが可能なコンテンツ生成装置、受信装置、及びプログラムを提供することにある。 SUMMARY OF THE INVENTION An object of the present invention, which has been made in view of such circumstances, is to provide a content generation device capable of continuing stable streaming by enabling a reception device to recognize changes in generation parameters during playback of streaming content. It is to provide a device and a program.

上記課題を解決するため、一実施形態に係るコンテンツ生成装置は、動画コンテンツのセグメント及びマニフェストファイルを生成するコンテンツ生成装置であって、動画コンテンツのセグメントを生成するために使用される生成パラメータに従って、メディアセグメントを生成するメディアセグメント生成部と、前記生成パラメータの変更に合わせて、メディアセグメントをデコードするために必要な情報を含む新たな初期化セグメントを生成する初期化セグメント生成部と、前記メディアセグメントごとに対応する前記初期化セグメントを示すセグメント対応関係情報を含むマニフェストファイルを生成するマニフェスト生成部と、前記メディアセグメント、前記初期化セグメント、及び前記マニフェストファイルを送信するコンテンツ送信部と、を備える。 In order to solve the above problems, a content generation device according to one embodiment is a content generation device that generates segments of video content and a manifest file, and according to generation parameters used to generate segments of video content, a media segment generation unit for generating media segments; an initialization segment generation unit for generating new initialization segments containing information necessary to decode the media segments according to the change in the generation parameters; and the media segments. a manifest generation unit that generates a manifest file including segment correspondence information indicating the initialization segment corresponding to each; and a content transmission unit that transmits the media segment, the initialization segment, and the manifest file.

さらに、一実施形態において、前記セグメント対応関係情報は、メディアセグメントのファイル名と、該メディアセグメントに対応する初期化セグメントのファイル名とを特定するための情報であってもよい。 Furthermore, in one embodiment, the segment correspondence information may be information for specifying the file name of the media segment and the file name of the initialization segment corresponding to the media segment.

さらに、一実施形態において、前記マニフェスト生成部は、MPD(Media Presentation Description)形式に準拠したマニフェストファイルに前記セグメント対応関係情報を追加することにより、1つのRepresentation内に複数の初期化セグメントの情報が記述されたマニフェストファイルを生成してもよい。 Furthermore, in one embodiment, the manifest generation unit adds the segment correspondence information to a manifest file conforming to the MPD (Media Presentation Description) format, so that information of a plurality of initialization segments is included in one Representation. You may generate a described manifest file.

また、上記課題を解決するため、一実施形態に係る受信装置は、動画コンテンツの初期化セグメント、メディアセグメント、及びマニフェストファイルを受信する受信装置であって、メディアセグメントごとに対応する初期化セグメントを示すセグメント対応関係情報が記述されたマニフェストファイルを取得し、メディアセグメントの再生時刻と、初期化セグメント及びメディアセグメントのURLとを対応付けたセグメントURLリストを生成するマニフェスト取得部と、メディアセグメントの再生とともに更新される再生時刻、及び前記セグメントURLリストに基づいて、前記メディアセグメントのURL、及び該メディアセグメントに対応する前記初期化セグメントのURLを抽出するバッファ制御部と、前記メディアセグメントの前記URLに基づいて前記メディアセグメントを取得し、前記初期化セグメントの前記URLに基づいて前記初期化セグメントを取得するセグメント取得部と、を備える。 Further, in order to solve the above problems, a receiving device according to one embodiment is a receiving device that receives an initialization segment of video content, a media segment, and a manifest file, and receives an initialization segment corresponding to each media segment. a manifest acquisition unit that acquires a manifest file in which segment correspondence information is described, and generates a segment URL list that associates the playback time of the media segment with the URL of the initialization segment and the media segment; and playback of the media segment a buffer control unit for extracting the URL of the media segment and the URL of the initialization segment corresponding to the media segment, based on the segment URL list and the playback time updated together with the segment URL list; a segment obtaining unit for obtaining the media segment based on the URL of the initialization segment and obtaining the initialization segment based on the URL of the initialization segment.

また、上記課題を解決するため、一実施形態に係るプログラムは、コンピュータを、上記コンテンツ生成装置として機能させる。 Further, in order to solve the above problem, a program according to one embodiment causes a computer to function as the content generation device.

また、上記課題を解決するため、一実施形態に係るプログラムは、コンピュータを、上記受信装置として機能させる。 Moreover, in order to solve the above problem, a program according to one embodiment causes a computer to function as the above receiving device.

本発明によれば、受信装置において、ストリーミングコンテンツ再生中の生成パラメータの変更を認識して継続的に再生することが可能となる。そのため、配信中のストリームの生成パラメータを、ネットワークの帯域変動やサービス事業者の運用要件に合わせて動的に変更することが可能となる。 Advantageous Effects of Invention According to the present invention, it becomes possible for a receiving device to recognize a change in a generation parameter during reproduction of streaming content and continuously reproduce the content. Therefore, it is possible to dynamically change the generation parameters of the stream being distributed in accordance with network band fluctuations and operational requirements of service providers.

本発明の一実施形態に係る受信装置及びコンテンツ生成装置を備えるコンテンツ配信システムの概略を示す図である。1 is a diagram showing an outline of a content distribution system including a receiving device and a content generation device according to one embodiment of the present invention; FIG. 本発明の一実施形態に係るコンテンツ生成装置の構成例を示すブロック図である。1 is a block diagram showing a configuration example of a content generation device according to an embodiment of the present invention; FIG. 本発明の一実施形態に係るコンテンツ生成装置によって生成されるMPD形式のマニフェストファイルの一例を示す図である。FIG. 3 is a diagram showing an example of a manifest file in MPD format generated by the content generation device according to one embodiment of the present invention; 本発明の一実施形態に係るコンテンツ生成装置のコンテンツ生成方法を示すフローチャートである。4 is a flow chart showing a content generation method of a content generation device according to an embodiment of the present invention; 本発明の一実施形態に係る受信装置の構成例を示すブロック図である。1 is a block diagram showing a configuration example of a receiver according to an embodiment of the present invention; FIG. 本発明の一実施形態に係る受信装置のセグメント取得制御方法を示すフローチャートである。4 is a flow chart showing a segment acquisition control method for a receiver according to an embodiment of the present invention; 従来のマニフェストファイルの概念を示す図である。It is a figure which shows the concept of the conventional manifest file. 従来の受信装置におけるバッファの概念を示す図である。FIG. 4 is a diagram showing the concept of a buffer in a conventional receiving device;

以下、本発明の一実施形態について、図面を参照して詳細に説明する。以下に説明する実施形態では一例として、マニフェストファイルをMPEG-DASH(ISO/IEC23009-1)のMPD形式とする。 An embodiment of the present invention will be described in detail below with reference to the drawings. In the embodiment described below, as an example, the manifest file is in MPEG-DASH (ISO/IEC23009-1) MPD format.

図1に、本発明の一実施形態に係る受信装置及びコンテンツ生成装置を備えるコンテンツ配信システムの概略を示す。コンテンツ配信システムは、複数のセグメントとマニフェストファイルにより構成される動画コンテンツを、セグメントごとに配信するシステムである。インターネットを介して、受信装置1と配信サーバ3とが接続される。コンテンツ生成装置2と配信サーバ3とは、専用のローカルネットワークで接続されてもよいし、インターネットを介して接続されてもよい。 FIG. 1 shows an outline of a content distribution system including a receiving device and a content generating device according to one embodiment of the present invention. A content distribution system is a system that distributes video content composed of a plurality of segments and a manifest file for each segment. Receiving device 1 and distribution server 3 are connected via the Internet. The content generation device 2 and the distribution server 3 may be connected by a dedicated local network, or may be connected via the Internet.

受信装置1は、配信サーバ3から動画コンテンツのセグメント(初期化セグメント及びメディアセグメント)、及びマニフェストファイルを受信し、ストリーミング再生を行う。 The receiving device 1 receives segments (initialization segments and media segments) of moving image content and manifest files from the distribution server 3, and performs streaming playback.

コンテンツ生成装置2は、動画コンテンツのセグメント及びマニフェストファイルを生成し、配信サーバ3に供給する。 The content generation device 2 generates segments and manifest files of video content and supplies them to the distribution server 3 .

配信サーバ3は、受信装置1によって指定されたURLのマニフェストファイル及びセグメントを受信装置1に配信するサーバであり、例えば一般的なWebサーバとすることができる。 The distribution server 3 is a server that distributes the manifest file and segment of the URL specified by the receiving device 1 to the receiving device 1, and can be, for example, a general web server.

(コンテンツ生成装置)
次に、コンテンツ生成装置2の詳細について説明する。図2は、コンテンツ生成装置2の構成例を示すブロック図である。図2に示すコンテンツ生成装置2は、素材映像出力部21と、生成パラメータ変更部22と、メディアセグメント生成部23と、初期化セグメント生成部24と、マニフェスト生成部25と、コンテンツ送信部26と、通信I/F27と、を備える。
(content generation device)
Next, details of the content generation device 2 will be described. FIG. 2 is a block diagram showing a configuration example of the content generation device 2. As shown in FIG. The content generation device 2 shown in FIG. , and a communication I/F 27 .

素材映像出力部21は、外部から入力された素材映像又は予め蓄積された素材映像から、生成対象のコンテンツをメディアセグメント生成部23に出力する。 The material video output unit 21 outputs the content to be generated to the media segment generation unit 23 from the material video input from the outside or the material video stored in advance.

生成パラメータ変更部22は、生成パラメータを設定又は変更し、生成パラメータをメディアセグメント生成部23及び初期化セグメント生成部24に出力する。生成パラメータとは、動画コンテンツのセグメントを生成するために使用されるパラメータであり、メディアの符号化パラメータ(解像度、ビットレート等)や、コンテンツ保護のための暗号化パラメータ等である。生成パラメータは、入力インターフェースを介してユーザにより設定又は変更されてもよい。また、生成パラメータ変更部22は、生成パラメータが変更されるタイミングを示すパラメータ変更トリガを初期化セグメント生成部24に出力する。 The generation parameter changing unit 22 sets or changes the generation parameters, and outputs the generation parameters to the media segment generation unit 23 and the initialization segment generation unit 24 . Generation parameters are parameters used to generate segments of video content, such as media encoding parameters (resolution, bit rate, etc.), encryption parameters for content protection, and the like. Generation parameters may be set or changed by a user through an input interface. The generation parameter changing unit 22 also outputs a parameter change trigger indicating the timing of changing the generation parameter to the initialization segment generation unit 24 .

メディアセグメント生成部23は、生成パラメータに従ってメディアセグメントを生成する。メディアセグメント生成部23は、エンコード部231と、セグメント化部232と、を備える。 The media segment generator 23 generates media segments according to the generation parameters. The media segment generator 23 includes an encoder 231 and a segmenter 232 .

エンコード部231は、素材映像出力部21から入力した素材映像信号を、生成パラメータ変更部22から入力した生成パラメータに従って、既存の符号化方式により符号化したり、既存の暗号化方式により暗号化したりする。既存の符号化方式は、例えばH.264|MPEG-4 AVC(Advanced Video Coding)、H.265|MPEG-H HEVC(High Efficiency Video Coding)等である。既存の暗号化方式は、例えばAES(Advanced Encryption Standard)方式等である。そして、エンコード部231は、符号化ストリームをセグメント化部232に出力する。なお、音声についても、映像と同様に処理することが可能である。 The encoding unit 231 encodes the material video signal input from the material video output unit 21 using an existing encoding method or encrypts the material video signal using an existing encryption method according to the generation parameters input from the generation parameter changing unit 22. . Existing coding schemes include, for example, H.264. 264|MPEG-4 AVC (Advanced Video Coding), H.264 | 265|MPEG-H HEVC (High Efficiency Video Coding). An existing encryption method is, for example, the AES (Advanced Encryption Standard) method. The encoding section 231 then outputs the encoded stream to the segmentation section 232 . Audio can also be processed in the same manner as video.

セグメント化部232は、エンコード部231から入力した符号化ストリームを、例えばISO-BMFF(ISO-Base Media File Format)形式でセグメント化して、メディアの情報を含むメディアセグメントを生成する。そして、セグメント化部232は、生成したメディアセグメントをマニフェスト生成部25に出力する。 The segmentation unit 232 segments the encoded stream input from the encoding unit 231 in, for example, the ISO-BMFF (ISO-Base Media File Format) format to generate media segments containing media information. The segmentation unit 232 then outputs the generated media segments to the manifest generation unit 25 .

初期化セグメント生成部24は、生成パラメータ変更部22から生成パラメータ及びパラメータ変更トリガを入力する。そして、初期化セグメント生成部24は、生成パラメータの変更に合わせて、メディアセグメントをデコードするために必要な情報を含む新たな初期化セグメントを生成する。例えば、初期化セグメント生成部24は、ISO-BMFF(ISO-Base Media File Format)形式でセグメント化して、生成パラメータを含む初期化セグメントを生成する。そして、初期化セグメント生成部24は、生成した初期化セグメントをマニフェスト生成部25に出力する。 The initialization segment generation unit 24 receives generation parameters and parameter change triggers from the generation parameter change unit 22 . Then, the initialization segment generator 24 generates a new initialization segment including information necessary for decoding the media segment in accordance with the change of the generation parameter. For example, the initialization segment generator 24 segments in the ISO-BMFF (ISO-Base Media File Format) format to generate an initialization segment including generation parameters. The initialization segment generator 24 then outputs the generated initialization segment to the manifest generator 25 .

マニフェスト生成部25は、セグメント化部232からメディアセグメントを入力し、初期化セグメント生成部24から初期化セグメントを入力する。そして、マニフェスト生成部25は、セグメント対応関係情報を含むマニフェストファイルを生成する。セグメント対応関係情報とは、メディアセグメントごとに対応する初期化セグメントを示す情報である。マニフェスト生成部25は、例えば、従来のMPEG-DASHのMPD形式に準拠したマニフェストファイルに、セグメント対応関係情報を追加する。そして、マニフェスト生成部25は、初期化セグメント、メディアセグメント、及びマニフェストファイルをコンテンツ送信部26に出力する。マニフェストファイルの生成は、セグメントを入力するたびに順次更新する方法で行われてもよいし、全てのセグメントを入力してから行われてもよい。 The manifest generation unit 25 receives media segments from the segmentation unit 232 and inputs initialization segments from the initialization segment generation unit 24 . Then, the manifest generation unit 25 generates a manifest file including segment correspondence information. The segment correspondence information is information indicating an initialization segment corresponding to each media segment. The manifest generation unit 25 adds segment correspondence information to, for example, a manifest file conforming to the MPD format of conventional MPEG-DASH. The manifest generator 25 then outputs the initialization segment, the media segment, and the manifest file to the content transmitter 26 . The manifest file may be generated by a method of sequentially updating each time a segment is input, or may be performed after inputting all segments.

コンテンツ送信部26は、マニフェスト生成部25から入力した初期化セグメント、メディアセグメント、及びマニフェストファイルを、通信I/F27を介して配信サーバ3に送信する。 The content transmission unit 26 transmits the initialization segment, the media segment, and the manifest file input from the manifest generation unit 25 to the distribution server 3 via the communication I/F 27 .

ここで、コンテンツ生成装置2によって生成されたコンテンツの具体例を、図3を参照して説明する。図3は、セグメント対応関係情報を追加したMPD形式のマニフェストファイルの一例(抜粋)を示しており、ここではセグメント対応関係情報を、メディアセグメントのファイル名と、該メディアセグメントに対応する初期化セグメントのファイル名とを特定するための情報としている。 A specific example of content generated by the content generation device 2 will now be described with reference to FIG. FIG. 3 shows an example (excerpt) of an MPD format manifest file to which segment correspondence information has been added. Here, the segment correspondence information consists of the file name of a media segment and the initialization segment corresponding to the media segment. It is used as information for specifying the file name of the file.

図3は、コンテンツ尺が32秒、セグメント長が2秒であり、エンコード開始から8秒ごとに生成パラメータが変更された場合のマニフェストファイルを示している。この例では、コンテンツ尺情報(duration)が32秒のPeriodが一つ存在し、Periodにはメディアの形式が映像(mimeType=”video/mp4”)のAdaptationSetが1つ存在し、AdaptationSetにはRepresentationが一つ存在している。 FIG. 3 shows a manifest file when the content duration is 32 seconds, the segment length is 2 seconds, and the generation parameters are changed every 8 seconds from the start of encoding. In this example, there is one Period whose content duration information (duration) is 32 seconds, and one AdaptationSet whose media format is video (mimeType="video/mp4") exists in the Period. exists one.

ここで、ある再生時刻を含むメディアセグメント及び該メディアセグメントに対応する初期化セグメントのファイル名を特定する方法について説明する。 Here, a method for identifying a media segment containing a certain playback time and a file name of an initialization segment corresponding to the media segment will be described.

図3の2行目のstartの値は、Periodの開始時刻が0であることを示す。図3の4行目のtimescaleの値は、AdaptationSetのタイムスケール(1秒間の目盛り数)が1000であることを示す。 The value of start on the second line in FIG. 3 indicates that the period start time is zero. The value of timescale on the fourth line in FIG. 3 indicates that the timescale (the number of graduations per second) of AdaptationSet is 1,000.

図3の13行目のmediaの値は、メディアセグメントのファイル名の基準値がs1_$Time$.mp4であることを示し、$Time$をメディアセグメントのタイムスタンプ値で置き換えた値がファイル名となる。また、initializationの値は、初期化セグメントのファイル名の基準値がs1_init_$Index$.mp4であることを示し、$Index$を初期化セグメントの識別子で置き換えた値がファイル名となる。 The value of media on the 13th line in FIG. 3 indicates that the reference value of the file name of the media segment is s1_$Time$.mp4, and the value obtained by replacing $Time$ with the time stamp value of the media segment is the file name. becomes. Also, the value of initialization indicates that the reference value of the file name of the initialization segment is s1_init_$Index$.mp4, and the value obtained by replacing $Index$ with the identifier of the initialization segment becomes the file name.

また、図3の5行目~10行目に示すSegmentTimelineは、それぞれのセグメントの再生開始時刻、セグメント長、及び対応する初期化セグメントの識別子の関係性を示している。S内のtは再生開始時刻、dはセグメント長、iは初期化セグメントの識別子、rはi、dが同じセグメントの継続回数を示している。つまり、6行目のSは開始時刻が0(t=0)でセグメント長が2秒(d/timescale)、初期化セグメントのインデックスが0であり、同じi、dが3セグメント継続することを示している。よって、セグメントのファイル名は、開始時刻が0秒、2秒、4秒、6秒のメディアセグメントがs1_0.mp4、s1_2000.mp4、s1_4000.mp4、s1_6000.mp4となり、これらに対応する初期化セグメントのファイル名が、s1_init_0.mp4となる。また、図5の7行目からは、開始時刻が8秒、10秒、12秒、14秒のメディアセグメントがs1_8000.mp4、s1_10000.mp4、s1_12000.mp4、s1_14000.mp4となり、これらに対応する初期化セグメントがs1_init_1.mp4であることがわかる。このようにして、ある再生時刻を含むメディアセグメントのファイル名と、該メディアセグメントに対応する初期化セグメントのファイル名とを特定することが可能となる。 Also, SegmentTimeline shown in the 5th to 10th lines of FIG. 3 indicates the relationship between the playback start time of each segment, the segment length, and the identifier of the corresponding initialized segment. In S, t is the playback start time, d is the segment length, i is the identifier of the initialized segment, r is i, and d is the number of continuations of the same segment. That is, S on the 6th line indicates that the start time is 0 (t=0), the segment length is 2 seconds (d/timescale), the index of the initialization segment is 0, and the same i and d continue for 3 segments. showing. Therefore, the segment file names are s1_0.mp4, s1_2000.mp4, s1_4000.mp4, and s1_6000.mp4 for media segments with start times of 0, 2, 4, and 6 seconds, and the corresponding initialization segments file name is s1_init_0.mp4. Also, from the 7th line in FIG. 5 , the media segments with start times of 8 seconds, 10 seconds, 12 seconds, and 14 seconds are s1_8000.mp4, s1_10000.mp4, s1_12000.mp4, and s1_14000.mp4. You can see that the initialization segment is s1_init_1.mp4. In this way, it is possible to specify the file name of the media segment containing a certain playback time and the file name of the initialization segment corresponding to the media segment.

図3の例では、5行目~10行目及び13行目が、セグメント対応関係情報である。ここで、iは従来の規格では定義されていない識別子であり、$Index$は従来の規格では定義されていない変数である。このように、マニフェスト生成部25は、MPD形式に準拠したマニフェストファイルにセグメント対応関係情報を追加することにより、1つのRepresentation内に複数の初期化セグメントの情報が記述されたマニフェストファイルを生成することが可能となる。図3の例では、id=1のRepresentationに対して、i=0~3の4つの初期化セグメントの情報が記述されている。 In the example of FIG. 3, the 5th to 10th and 13th lines are segment correspondence information. Here, i is an identifier that is not defined in the conventional standard, and $Index$ is a variable that is not defined in the conventional standard. In this way, the manifest generation unit 25 adds segment correspondence information to a manifest file conforming to the MPD format, thereby generating a manifest file in which information on a plurality of initialization segments is described within one Representation. becomes possible. In the example of FIG. 3, information of four initialization segments with i=0 to 3 is described for Representation with id=1.

(コンテンツの生成方法)
次に、本発明のコンテンツの生成方法について図4のフローチャートを参照して説明する。
(Content generation method)
Next, the content generation method of the present invention will be described with reference to the flowchart of FIG.

ステップS001では、生成パラメータ変更部22により、エンコード開始前であれば生成パラメータの初期設定があるか否かを確認し、エンコードを開始していれば生成パラメータの変更があるか否かを確認する。生成パラメータの初期設定又は変更がある場合には(ステップS001-YES)、処理をステップS002に進め、生成パラメータの初期設定及び変更がない場合には(ステップS001-NO)、処理をステップS004に進める。 In step S001, the generation parameter changing unit 22 confirms whether or not the generation parameters have been initialized if before the start of encoding, and confirms whether or not the generation parameters have been changed if the encoding has started. . If the generation parameters are initialized or changed (step S001-YES), the process proceeds to step S002, and if the generation parameters are not initialized or changed (step S001-NO), the process proceeds to step S004. proceed.

ステップS002では、生成パラメータ変更部22により、設定又は変更された生成パラメータを新規生成パラメータとして設定する。 In step S002, the generation parameter changing unit 22 sets the set or changed generation parameter as a new generation parameter.

ステップS003では、初期化セグメント生成部24により、新規生成パラメータによる初期化セグメントを生成する。 In step S003, the initialization segment generator 24 generates an initialization segment based on newly generated parameters.

ステップS004では、エンコード部231により、前回設定した設定済みパラメータを用いてエンコードを継続する。 In step S004, the encoding unit 231 continues encoding using the previously set parameters.

ステップS005では、セグメント化部232により、所定の間隔でセグメント化したメディアセグメントを生成する。 In step S005, the segmentation unit 232 generates media segments segmented at predetermined intervals.

ステップS006では、マニフェスト生成部25により、生成パラメータごとの初期化セグメントと、各生成パラメータによって生成されたメディアセグメントとを対応付ける。 In step S006, the manifest generation unit 25 associates the initialization segment for each generation parameter with the media segment generated by each generation parameter.

ステップS007では、マニフェスト生成部25により、マニフェストファイルを更新する。そして、コンテンツ送信部26及び通信I/F27により、初期化セグメント、メディアセグメント、及びマニフェストファイルを送信する。 In step S<b>007 , the manifest file is updated by the manifest generation unit 25 . And the initialization segment, the media segment, and the manifest file are transmitted by the content transmission part 26 and communication I/F27.

ステップS008では、エンコードがコンテンツの最後に到達したか、又はエンコード終了が指示されたか否かを確認する。エンコードがコンテンツの最後に到達するか、エンコード終了指示があった場合には(ステップS008-YES)、処理を終了する。エンコードがコンテンツの最後に到達しておらず、エンコード終了指示がない場合には(ステップS008-NO)、処理を継続する。 In step S008, it is checked whether the encoding has reached the end of the content or whether the end of encoding has been instructed. If the encoding reaches the end of the content, or if there is an encoding end instruction (step S008-YES), the process ends. If the encoding has not reached the end of the content and there is no encoding end instruction (step S008-NO), the process continues.

なお、上述したコンテンツ生成装置2として機能させるためにコンピュータを好適に用いることができ、そのようなコンピュータは、コンテンツ生成装置2の各機能を実現する処理内容を記述したプログラムを該コンピュータの記憶部に格納しておき、該コンピュータのプロセッサによってこのプログラムを読み出して実行させることで実現することができる。なお、このプログラムは、コンピュータ読取り可能な記録媒体に記録可能である。 A computer can be preferably used to function as the content generation device 2 described above. , and the program can be read and executed by the processor of the computer. This program can be recorded on a computer-readable recording medium.

(受信装置)
次に、受信装置1の詳細について説明する。図5は、受信装置1の構成例を示すブロック図である。図5に示す受信装置1は、通信I/F10と、マニフェスト取得部11と、セグメントリスト記憶部12と、セグメント取得部13と、バッファ14と、バッファ制御部15と、再生制御部16と、再生制御ユーザI/F17と、再生部18と、表示部19と、を備える。
(receiving device)
Next, details of the receiving device 1 will be described. FIG. 5 is a block diagram showing a configuration example of the receiving device 1. As shown in FIG. The receiving device 1 shown in FIG. 5 includes a communication I/F 10, a manifest acquisition unit 11, a segment list storage unit 12, a segment acquisition unit 13, a buffer 14, a buffer control unit 15, a reproduction control unit 16, A playback control user I/F 17 , a playback unit 18 , and a display unit 19 are provided.

マニフェスト取得部11は、配信サーバ3から所望の番組のマニフェストファイルを通信I/F10を介して受信する。そして、マニフェスト取得部11は、セグメント対応関係情報が記述されたマニフェストファイルを解析し、メディアセグメントの再生時刻と、初期化セグメント及びメディアセグメントのURLとを対応付けたセグメントURLリストを生成し、セグメントURLリストをセグメントリスト記憶部12に記憶する。 The manifest acquisition unit 11 receives the manifest file of the desired program from the distribution server 3 via the communication I/F 10 . Then, the manifest acquisition unit 11 analyzes the manifest file in which the segment correspondence relationship information is described, generates a segment URL list in which the playback time of the media segment is associated with the URL of the initialization segment and the media segment, A URL list is stored in the segment list storage unit 12 .

セグメント取得部13は、バッファ制御部15から取得対象のセグメントのURLを入力し、該入力したセグメントのURLを含むリクエストを通信I/F10を介して配信サーバ3に要求する。そして、セグメント取得部13は、該リクエストへのレスポンスとして、配信サーバ3から通信I/F10を介してセグメントを受信し、バッファ制御部15に出力する。 The segment acquisition unit 13 inputs the URL of the segment to be acquired from the buffer control unit 15 and requests the distribution server 3 via the communication I/F 10 to make a request including the input segment URL. As a response to the request, the segment acquisition unit 13 receives segments from the distribution server 3 via the communication I/F 10 and outputs the segments to the buffer control unit 15 .

バッファ14は、バッファ制御部15からセグメントを入力し、メディアセグメントを、初期化セグメント、並びにメディアセグメントの再生開始時刻及び再生継続時間(セグメント長)と対応付けて保存する。そして、バッファ14は、現在の保存中の全メディアセグメントのセグメント再生時刻及び再生継続時間の情報を、バッファ制御部15に出力する。また、バッファ14は、再生部18から要求された再生時刻のセグメントを順次再生部18に出力する。 The buffer 14 receives the segment from the buffer control unit 15 and stores the media segment in association with the initialization segment, the playback start time and the playback duration (segment length) of the media segment. Then, the buffer 14 outputs to the buffer control unit 15 the segment playback time and playback duration information of all media segments currently being stored. In addition, the buffer 14 sequentially outputs the segments of the playback times requested by the playback unit 18 to the playback unit 18 .

再生制御部16は、現在の再生状態(再生中、停止中)、及び再生部18から入力した現在再生時刻情報を再生制御ユーザI/F17に出力する。また、再生制御部16は、再生制御ユーザI/F17から再生開始、停止の命令を入力すると、再生部18に再生開始・停止を指示する。 The reproduction control unit 16 outputs the current reproduction state (during reproduction, stopped) and the current reproduction time information input from the reproduction unit 18 to the reproduction control user I/F 17 . Further, when a reproduction start/stop command is input from the reproduction control user I/F 17, the reproduction control unit 16 instructs the reproduction unit 18 to start/stop reproduction.

再生制御ユーザI/F17は、ユーザの操作によって再生を制御する機能である。再生開始・停止ボタンや所望の再生時刻へのシーク操作を可能とするボタン等を備え、コンテンツの開始、終了時刻、及び再生制御部16から入力された再生時刻情報をもとに、現在の再生時刻をグラフィカルに表示してもよい。例えば、再生画面の下部にコンテンツの開始時刻を左端、終了時刻を右端とする横長の棒状で表示し、それと重なるようにつまみ状の操作部分を配置し、つまみ状の操作部分を再生が進むにつれて左端から右端に移動させることによって、再生時間全体のうち今どの部分を再生しているのかを一目で把握することができるようにすることができる。また、つまみ状の操作部分を変更することによって、所望の再生時刻へのシーク操作を行うようにしてもよい。 The reproduction control user I/F 17 is a function for controlling reproduction by user's operation. Equipped with a playback start/stop button and a button that enables a seek operation to a desired playback time. You may display time graphically. For example, a horizontally long bar with the start time of the content on the left and the end time on the right is displayed at the bottom of the playback screen. By moving from the left end to the right end, it is possible to grasp at a glance which part of the entire reproduction time is currently being reproduced. Further, by changing the knob-like operation portion, a seek operation to a desired playback time may be performed.

再生部18は、再生制御部16から再生開始時刻を含む再生命令を入力すると、再生開始時刻に基づいてメディアセグメントを順次バッファ14から入力し、メディアセグメントを、該メディアセグメントに対応する初期化セグメントが示すパラメータを用いてデコードし、表示部19に出力する。また、再生部18は、メディアセグメントの再生とともに更新される再生時刻の情報である再生時刻情報を再生制御部16に出力する。また、再生部18は、再生制御部16から停止命令を入力した場合には、再生を停止する。 When the playback command including the playback start time is input from the playback control unit 16, the playback unit 18 sequentially inputs media segments from the buffer 14 based on the playback start time, and converts the media segments into initialization segments corresponding to the media segments. is decoded using the parameters indicated by , and output to the display unit 19 . The reproducing unit 18 also outputs to the reproduction control unit 16 reproduction time information, which is reproduction time information updated along with the reproduction of the media segment. Further, when a stop command is input from the reproduction control unit 16, the reproduction unit 18 stops reproduction.

表示部19は、再生部18から入力したデコード済みのメディアデータをそのメディアの形式に従って表示する。 The display unit 19 displays the decoded media data input from the playback unit 18 according to the media format.

バッファ制御部15は、再生制御部16から入力した再生時刻情報及びセグメントURLリストから、取得対象のセグメントのURLを決定(抽出)し、セグメント取得部13に出力する。また、バッファ制御部15は、セグメント取得部13から入力したセグメントをバッファ14に出力する。 The buffer control unit 15 determines (extracts) the URL of the segment to be acquired from the playback time information and the segment URL list input from the playback control unit 16 , and outputs it to the segment acquisition unit 13 . The buffer control unit 15 also outputs the segment input from the segment acquisition unit 13 to the buffer 14 .

(セグメント取得制御方法)
次に、受信装置1のセグメント取得制御方法について、図6のフローチャートを参照して説明する。図6に示すフローチャートは、既にマニフェスト取得部11により、配信サーバ3からマニフェストファイルを取得しており、セグメントURLリストも作成済みの状態から開始するものとする。また、バッファ14は、MPDに記載のPeriodの開始時刻から終了時刻までの範囲を持っており、セグメントを再生開始時刻と再生継続時刻の情報と対応つけて保存しているものとする。また、バッファ14にコンテンツのセグメントが挿入されている範囲をバッファ済みセグメント範囲と称する。
(Segment Acquisition Control Method)
Next, the segment acquisition control method of the receiver 1 will be described with reference to the flowchart of FIG. In the flowchart shown in FIG. 6, it is assumed that the manifest acquisition unit 11 has already acquired the manifest file from the distribution server 3 and the segment URL list is already created. It is also assumed that the buffer 14 has a range from the start time to the end time of the Period described in the MPD, and stores the segments in association with information on the reproduction start time and the reproduction continuation time. Also, the range in which content segments are inserted into the buffer 14 is called a buffered segment range.

ステップS101では、再生制御ユーザI/F17においていずれかの再生開始が実行されたら、再生制御部16により、再生開始時刻を現在再生時刻としてバッファ制御部15に出力する。 In step S101, when any playback is started in the playback control user I/F 17, the playback control unit 16 outputs the playback start time to the buffer control unit 15 as the current playback time.

ステップS102では、バッファ制御部15により、現在再生時刻がバッファ済みセグメント範囲内であるか否かを判定する。バッファ済みセグメント範囲内であれば(ステップS102-YES)、処理をステップS103に進め、バッファ済みセグメント範囲内でなければ(ステップS102-NO)、処理をステップS104に進める。 In step S102, the buffer control unit 15 determines whether or not the current playback time is within the buffered segment range. If it is within the buffered segment range (step S102-YES), the process proceeds to step S103, and if not within the buffered segment range (step S102-NO), the process proceeds to step S104.

ステップS103では、バッファ制御部15により、セグメントURLリストから、バッファ済みセグメント範囲に続くメディアセグメントのURL、及び該メディアセグメントに対応する初期化セグメントのURLを抽出する。 In step S103, the buffer control unit 15 extracts the URL of the media segment following the buffered segment range and the URL of the initialization segment corresponding to the media segment from the segment URL list.

ステップS104では、バッファ制御部15により、セグメントURLリストから、現在開始時刻を含むメディアセグメントのURL、及び該メディアセグメントに対応する初期化セグメントのURLを抽出する。 In step S104, the buffer control unit 15 extracts the URL of the media segment including the current start time and the URL of the initialization segment corresponding to the media segment from the segment URL list.

ステップS105では、バッファ制御部15により、該抽出した初期化セグメントのURLが前回取得したメディアセグメントのURLと異なるか否か判定する。異なる場合は(ステップS105-YES)、処理をステップS106に進め、一致する場合は(ステップS105-NO)、処理をステップS108に進める。 In step S105, the buffer control unit 15 determines whether or not the URL of the extracted initialization segment is different from the URL of the previously obtained media segment. If different (step S105-YES), the process proceeds to step S106, and if they match (step S105-NO), the process proceeds to step S108.

ステップS106では、セグメント取得部13により、該抽出した初期化セグメントのURLを含むセグメント要求を配信サーバ3に送信し、該要求に対応する初期化セグメントを受信する。 In step S106, the segment acquisition unit 13 transmits a segment request including the URL of the extracted initialization segment to the distribution server 3, and receives the initialization segment corresponding to the request.

ステップS107では、バッファ制御部15により、該受信した初期化セグメントをバッファ14に挿入する。 In step S<b>107 , the received initialization segment is inserted into the buffer 14 by the buffer control unit 15 .

ステップS108では、セグメント取得部13により、ステップS103又はステップS104で抽出したメディアセグメントのURLを含むセグメント要求を配信サーバ3に送信し、該要求に対応するメディアセグメントを受信する。 In step S108, the segment acquisition unit 13 transmits a segment request including the URL of the media segment extracted in step S103 or step S104 to the distribution server 3, and receives the media segment corresponding to the request.

ステップS109では、バッファ制御部15により、該受信したメディアセグメントをバッファ14に挿入する。 In step S<b>109 , the received media segment is inserted into the buffer 14 by the buffer control unit 15 .

ステップS110では、セグメントURLリストの最後に到達したか、又は停止ボタンが押されたか否かを確認する。セグメントURLリストの最後に到達するか、停止ボタンが押された場合には(ステップS110-YES)、処理を終了する。セグメントURLリストの最後に達しておらず、停止ボタンが押されていない場合には(ステップS110-NO)、処理をステップS1111に進める。 In step S110, it is checked whether the end of the segment URL list has been reached or the stop button has been pressed. When the end of the segment URL list is reached or the stop button is pressed (step S110-YES), the process ends. If the end of the segment URL list has not been reached and the stop button has not been pressed (step S110-NO), the process proceeds to step S1111.

ステップS111では、再生部18により、再生を継続し、現在再生時刻を更新し、処理をステップS102に戻す。 In step S111, the reproduction unit 18 continues reproduction, updates the current reproduction time, and returns the process to step S102.

なお、上述した受信装置1として機能させるためにコンピュータを好適に用いることができ、そのようなコンピュータは、受信装置1の各機能を実現する処理内容を記述したプログラムを該コンピュータの記憶部に格納しておき、該コンピュータのプロセッサによってこのプログラムを読み出して実行させることで実現することができる。なお、このプログラムは、コンピュータ読取り可能な記録媒体に記録可能である。 A computer can be preferably used to function as the receiving device 1 described above, and such a computer stores a program describing processing details for realizing each function of the receiving device 1 in a storage unit of the computer. It can be realized by reading out and executing this program by the processor of the computer. This program can be recorded on a computer-readable recording medium.

上述したように、コンテンツ生成装置2又はコンテンツ生成装置2として機能させるためのプログラムは、生成パラメータの変更に合わせて新たな初期化セグメントを生成し、セグメント対応関係情報を含むマニフェストファイルを生成する。そして、受信装置1又は受信装置1として機能させるためのプログラムは、セグメント対応関係情報が記述されたマニフェストファイルを取得することにより、ストリーミングコンテンツ再生中の生成パラメータの変更を認識することができ、安定したストリーミングを継続することができるようになる。 As described above, the content generation device 2 or a program for functioning as the content generation device 2 generates new initialization segments according to changes in generation parameters, and generates a manifest file containing segment correspondence information. Then, the receiving device 1 or a program for functioning as the receiving device 1 can recognize changes in generation parameters during streaming content playback by acquiring a manifest file in which segment correspondence information is described, and can stably You will be able to continue streaming.

上述の実施形態は代表的な例として説明したが、本発明の趣旨及び範囲内で、多くの変更及び置換ができることは当業者に明らかである。したがって、本発明は、上述の実施形態によって制限するものと解するべきではなく、特許請求の範囲から逸脱することなく、種々の変形や変更が可能である。例えば、実施形態に記載の構成ブロック又は処理ステップについて、複数を1つに組み合わせたり、1つを複数に分割したりすることが可能である。 Although the above embodiments have been described as representative examples, it will be apparent to those skilled in the art that many modifications and substitutions may be made within the spirit and scope of the invention. Therefore, the present invention should not be construed as limited by the embodiments described above, and various modifications and changes are possible without departing from the scope of the appended claims. For example, a plurality of constituent blocks or processing steps described in the embodiments may be combined into one or one may be divided into a plurality.

1 受信装置
2 コンテンツ生成装置
3 配信サーバ
10 通信I/F
11 マニフェスト取得部
12 セグメントリスト記憶部
13 セグメント取得部
14 バッファ
15 バッファ制御部
16 再生制御部
17 再生制御ユーザI/F
18 再生部
19 表示部
21 素材映像出力部
22 生成パラメータ変更部
23 メディアセグメント生成部
24 初期化セグメント生成部
25 マニフェスト生成部
26 コンテンツ送信部
27 通信I/F
231 エンコード部
232 セグメント化部
1 Receiving Device 2 Content Generating Device 3 Distribution Server 10 Communication I/F
REFERENCE SIGNS LIST 11 manifest acquisition unit 12 segment list storage unit 13 segment acquisition unit 14 buffer 15 buffer control unit 16 playback control unit 17 playback control user I/F
18 reproduction unit 19 display unit 21 material video output unit 22 generation parameter change unit 23 media segment generation unit 24 initialization segment generation unit 25 manifest generation unit 26 content transmission unit 27 communication I/F
231 encoding unit 232 segmenting unit

Claims (6)

動画コンテンツのセグメント及びマニフェストファイルを生成するコンテンツ生成装置であって、
動画コンテンツのセグメントを生成するために使用される生成パラメータに従って、メディアセグメントを生成するメディアセグメント生成部と、
前記生成パラメータの変更に合わせて、メディアセグメントをデコードするために必要な情報を含む新たな初期化セグメントを生成する初期化セグメント生成部と、
前記メディアセグメントごとに対応する前記初期化セグメントを示すセグメント対応関係情報を含むマニフェストファイルを生成するマニフェスト生成部と、
前記メディアセグメント、前記初期化セグメント、及び前記マニフェストファイルを送信するコンテンツ送信部と、
を備えるコンテンツ生成装置。
A content generation device that generates video content segments and manifest files,
a media segment generator for generating media segments according to generation parameters used to generate segments of video content;
an initialization segment generation unit that generates a new initialization segment containing information necessary to decode the media segment in accordance with the change in the generation parameter;
a manifest generation unit that generates a manifest file including segment correspondence information indicating the initialization segment corresponding to each media segment;
a content transmission unit that transmits the media segment, the initialization segment, and the manifest file;
A content generation device comprising:
前記セグメント対応関係情報は、メディアセグメントのファイル名と、該メディアセグメントに対応する初期化セグメントのファイル名とを特定するための情報である、請求項1に記載のコンテンツ生成装置。 2. The content generation device according to claim 1, wherein said segment correspondence information is information for specifying a file name of a media segment and a file name of an initialization segment corresponding to said media segment. 前記マニフェスト生成部は、MPD(Media Presentation Description)形式に準拠したマニフェストファイルに前記セグメント対応関係情報を追加することにより、1つのRepresentation内に複数の初期化セグメントの情報が記述されたマニフェストファイルを生成する、請求項1又は2に記載のコンテンツ生成装置。 The manifest generation unit adds the segment correspondence information to a manifest file conforming to the MPD (Media Presentation Description) format, thereby generating a manifest file in which information on a plurality of initialization segments is described within one Representation. 3. The content generation device according to claim 1 or 2, wherein: 動画コンテンツの初期化セグメント、メディアセグメント、及びマニフェストファイルを受信する受信装置であって、
メディアセグメントごとに対応する初期化セグメントを示すセグメント対応関係情報が記述されたマニフェストファイルを取得し、メディアセグメントの再生時刻と、初期化セグメント及びメディアセグメントのURLとを対応付けたセグメントURLリストを生成するマニフェスト取得部と、
メディアセグメントの再生とともに更新される再生時刻、及び前記セグメントURLリストに基づいて、前記メディアセグメントのURL、及び該メディアセグメントに対応する前記初期化セグメントのURLを抽出するバッファ制御部と、
前記メディアセグメントの前記URLに基づいて前記メディアセグメントを取得し、前記初期化セグメントの前記URLに基づいて前記初期化セグメントを取得するセグメント取得部と、
を備えることを特徴とする、受信装置。
A receiving device that receives initialization segments, media segments, and manifest files of video content,
Acquire a manifest file that describes segment correspondence information indicating the initialization segment corresponding to each media segment, and generate a segment URL list that associates the playback time of the media segment with the URL of the initialization segment and the media segment. a manifest acquisition unit that
a buffer control unit that extracts the URL of the media segment and the URL of the initialization segment corresponding to the media segment based on the segment URL list and the playback time updated along with the playback of the media segment;
a segment acquisition unit that acquires the media segment based on the URL of the media segment and acquires the initialization segment based on the URL of the initialization segment;
A receiver, comprising:
コンピュータを、請求項1から3のいずれか一項に記載のコンテンツ生成装置として機能させるためのプログラム。 A program for causing a computer to function as the content generation device according to any one of claims 1 to 3. コンピュータを、請求項4に記載の受信装置として機能させるためのプログラム。 A program for causing a computer to function as the receiving device according to claim 4.
JP2021032098A 2021-03-01 2021-03-01 Content generation device, reception device, and program Pending JP2022133163A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021032098A JP2022133163A (en) 2021-03-01 2021-03-01 Content generation device, reception device, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021032098A JP2022133163A (en) 2021-03-01 2021-03-01 Content generation device, reception device, and program

Publications (1)

Publication Number Publication Date
JP2022133163A true JP2022133163A (en) 2022-09-13

Family

ID=83229536

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021032098A Pending JP2022133163A (en) 2021-03-01 2021-03-01 Content generation device, reception device, and program

Country Status (1)

Country Link
JP (1) JP2022133163A (en)

Similar Documents

Publication Publication Date Title
US20200288182A1 (en) Transmission device, transmission method, receiving device, and receiving method for rendering a multi-image-arrangement distribution service
JP6081541B2 (en) Data transmission method and apparatus
US10284612B2 (en) Media quality information signaling in dynamic adaptive video streaming over hypertext transfer protocol
RU2571375C2 (en) Trick modes for network streaming of coded video data
KR101777348B1 (en) Method and apparatus for transmitting and receiving of data
KR101750049B1 (en) Method and apparatus for adaptive streaming
EP2938091B1 (en) Method and device for receiving and sending media file and system
EP2962467A1 (en) Metadata information signaling and carriage in dynamic adaptive streaming over hypertext transfer protocol
JPWO2017138387A1 (en) Information processing apparatus and information processing method
JP7238948B2 (en) Information processing device and information processing method
KR102499231B1 (en) Receiving device, sending device and data processing method
JP2023517485A (en) Identifying Elements in Groups for Dynamic Element Replacement
JP2015136059A (en) Communication device, communication data generation method, and communication data processing method
KR102376204B1 (en) Distribution apparatus, distribution method, reception apparatus, reception method, program and content distribution system
WO2018142946A1 (en) Information processing device and method
JP6609468B2 (en) Receiving device, reproduction time control method, and program
JP4315914B2 (en) Image reproducing apparatus and image reproducing method
JP6535273B2 (en) Receiving device, segment acquisition method, and program
JP6397341B2 (en) Reception device, buffer management method, and program
JP2022133163A (en) Content generation device, reception device, and program
JP2016213709A (en) Moving image reproduction system, client device, server device, and program
KR102533674B1 (en) Receiving device, sending device and data processing method
JP7324012B2 (en) Receiving device and program
JP5144771B2 (en) Image processing apparatus, image reproducing apparatus, image recording apparatus, image processing method, image reproducing method, and image recording method
JP6581884B2 (en) Reception device, buffer management method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240201