JP2015065488A - Generation apparatus, reproduction apparatus, data structure, generation method, reproduction method, control program, and recording medium - Google Patents
Generation apparatus, reproduction apparatus, data structure, generation method, reproduction method, control program, and recording medium Download PDFInfo
- Publication number
- JP2015065488A JP2015065488A JP2012017299A JP2012017299A JP2015065488A JP 2015065488 A JP2015065488 A JP 2015065488A JP 2012017299 A JP2012017299 A JP 2012017299A JP 2012017299 A JP2012017299 A JP 2012017299A JP 2015065488 A JP2015065488 A JP 2015065488A
- Authority
- JP
- Japan
- Prior art keywords
- unit
- information
- update
- packet
- reproduction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
- H04N21/64322—IP
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
Description
本発明は、複数のコンポーネントで構成されるコンテンツをネットワークを介して送信するときのデータ構造等に関する。 The present invention relates to a data structure or the like when transmitting content composed of a plurality of components via a network.
近年、映像、音声、テキストなどの様々なコンテンツの配信が行われており、このようなコンテンツを配信するための伝送フォーマットの規格化も進められている。特に、MPEG MMT(MPEG Media Transport:MPEGメディア伝送プロトコル)の標準化は、注目を集めている。 In recent years, various contents such as video, audio, and text have been distributed, and standardization of a transmission format for distributing such contents has also been promoted. In particular, standardization of MPEG MMT (MPEG Media Transport Protocol) has attracted attention.
このMPEG MMTでは、映像、音声、テキストなどの複数のコンポーネントをそれぞれ異なる経路で配信(ハイブリッド配信)するのに効率的な伝送フォーマット等の標準化が進められている。 In this MPEG MMT, standardization of an efficient transmission format or the like is being promoted for distributing a plurality of components such as video, audio, and text through different paths (hybrid distribution).
MPEG MMTのコンテンツは、パッケージ(MMT Package)として格納され、複数のコンポーネント(MMT Asset)に加え、各コンポーネントの表示位置、大きさなどのレイアウトや組み合わせ可否などの再生条件を示す構成情報(Composition Information:CI)、および最適配信経路を判断するための各コンポーネントの必要帯域や許容遅延などの伝送特性情報(Transport Characteristics:TC)に関するデータを少なくとも含む。 The contents of MPEG MMT are stored as a package (MMT Package), and in addition to a plurality of components (MMT Asset), composition information (Composition Information) indicating playback conditions such as layout and combination of each component display position and size CI) and at least data related to transmission characteristics information (Transport Characteristics: TC) such as necessary bandwidth and allowable delay of each component for determining the optimum delivery route.
このようなコンテンツは、パケットに分割して単一のネットワークで伝送することができ、また複数のネットワークで(ハイブリッド)伝送することもできる。これについて、図11に基づいて説明する。図11は、コンテンツの伝送態様を示す図であり、同図(a)は単一ネットワークによる伝送の例を示し、同図(b)は複数ネットワークによるハイブリッド伝送の例を示している。なお、同図では、1つの伝送パケットを1つのブロックとして記載している。 Such content can be divided into packets and transmitted over a single network, or can be transmitted over multiple networks (hybrid). This will be described with reference to FIG. 11A and 11B are diagrams illustrating a content transmission mode. FIG. 11A illustrates an example of transmission by a single network, and FIG. 11B illustrates an example of hybrid transmission by a plurality of networks. In the figure, one transmission packet is described as one block.
同図(a)の例では、構成情報の伝送パケットCI1と、伝送特性情報の伝送パケットTC1の後に、複数の伝送パケット(A1,1、A2,1、…)が続いている。このA1,1以降の伝送パケット(Ai,j:i=1,2,…、j=1,2,…)には、アセットを構成するメディアユニットがそれぞれ含まれている。これらのメディアユニットは、TC1に基づいて決定したネットワークを介して受信機に送信され、受信機はこれらのメディアユニットをCI1に基づいて再生する。 In the example of FIG. 5A, a transmission packet CI 1 of configuration information and a transmission packet TC 1 of transmission characteristic information are followed by a plurality of transmission packets (A 1,1 , A 2,1 ,...). . The transmission packets after A 1,1 (A i, j : i = 1, 2,..., J = 1, 2,...) Include media units constituting the asset. These media units are transmitted to the receiver via the network determined based on TC 1 , and the receiver plays these media units based on CI 1 .
また、図示の例では、構成情報の伝送パケットがもう一つ含まれており(CI2)、この伝送パケットの後には、複数の伝送パケット(A1,p、A2,q、…)が続いている。これらの伝送パケットに含まれるメディアユニットは、CI2に基づいて再生される。つまり、1つのアセットの途中で参照すべき構成情報がCI1からCI2に変わっている。 In the illustrated example, another transmission packet of configuration information is included (CI 2 ), and a plurality of transmission packets (A 1, p , A 2, q ,...) Are included after this transmission packet. in the process of. Media unit contained in these transmission packets are reproduced based on the CI 2. That is, the configuration information to be referred to in the middle of one asset is changed from CI 1 to CI 2 .
同図(a)の例では、これらの伝送パケットは、何れも1つのネットワークを介し、1つの経路で送信機から受信機に配信される。 In the example of FIG. 5A, all these transmission packets are distributed from the transmitter to the receiver through one network through one network.
一方、同図(b)の例では、構成情報(CI1,CI2,…)の伝送パケットと、1番目のアセットを構成するメディアユニットを含む伝送パケット(A1,1、…、A1,p、…)と、2番目のアセットを構成するメディアユニットを含む伝送パケット(A2,1、…、A2,q、…)とは、それぞれ別のネットワークを介して別の経路で伝送される。なお、ハイブリッド伝送については、下記の特許文献1にも記載されている。
On the other hand, in the example of FIG. 5B, the transmission packet of the configuration information (CI 1 , CI 2 ,...) And the transmission packet (A 1,1 ,..., A 1 including the media unit constituting the first asset. , P ,...) And transmission packets (A 2,1 ,..., A 2, q ,...) Including the media units that form the second asset are transmitted through different networks through different paths. Is done. The hybrid transmission is also described in
このように、同図(a)(b)何れの場合であっても、1つのコンテンツに対して複数の構成情報を送信することができる。このため、送信側の意向やコンポーネントの特性に応じて、1つのコンポーネントの配信途中で構成情報を変更することも可能である。 As described above, a plurality of pieces of configuration information can be transmitted for one content regardless of which case is shown in FIGS. For this reason, it is also possible to change the configuration information during the distribution of one component according to the intention of the transmitting side and the characteristics of the component.
上記のような伝送パケットを受信した受信機は、構成情報(CI)の内容に基づいて、コンポーネントをユーザに提示する。このため、何らかの原因で更新後の構成情報の受信が想定以上に遅延した場合等には、構成情報の更新に伴う処理が遅延し、これによって、コンポーネントの再生開始が遅延することがあった。また、更新前の構成情報に基づいて誤ったレイアウトや組み合わせで表示されることもあった。 The receiver that has received the transmission packet as described above presents the component to the user based on the content of the configuration information (CI). For this reason, when the reception of the updated configuration information is delayed more than expected for some reason, the processing associated with the update of the configuration information is delayed, which may delay the start of component reproduction. In addition, an incorrect layout or combination may be displayed based on the configuration information before update.
これは、特に、図11(b)のように、複数のネットワークを利用した伝送において生じる可能性が高い問題点である。また、これは、構成情報に限られず、再生時に参照すべき再生用情報を受信機に送信するシステムにおける共通の問題点である。 This is a problem that is particularly likely to occur in transmission using a plurality of networks, as shown in FIG. This is not limited to the configuration information, and is a common problem in systems that transmit reproduction information to be referred to during reproduction to the receiver.
本発明は、上記の問題点に鑑みてなされたものであり、その目的は、再生用情報の更新が反映されずに誤った再生が行われる可能性を低減することのできる生成装置等を提供することにある。 The present invention has been made in view of the above-described problems, and an object of the present invention is to provide a generation device and the like that can reduce the possibility of erroneous reproduction without reflecting the update of reproduction information. There is to do.
上記の課題を解決するために、本発明の生成装置は、複数のコンポーネントで構成されるコンテンツを送信するために、上記コンポーネントを所定の分割単位で分割して生成された複数のユニットの1つを含むパケットを生成する生成装置であって、上記複数のユニットのうち、上記コンポーネントの再生態様を示し、再生時に参照すべき再生用情報が更新されたユニットを特定する更新ユニット特定手段と、上記更新ユニット特定手段が特定したユニットと、上記再生用情報の更新を示す更新情報とを含むパケットを生成するパケット生成手段とを備えていることを特徴としている。 In order to solve the above-described problem, the generation apparatus of the present invention is one of a plurality of units generated by dividing the component by a predetermined division unit in order to transmit content composed of the plurality of components. An update unit specifying means for indicating a playback mode of the component among the plurality of units, and specifying a unit in which playback information to be referred to at the time of playback is updated; Packet generating means for generating a packet including a unit specified by the update unit specifying means and update information indicating the update of the reproduction information is provided.
また、本発明の生成方法は、上記の課題を解決するために、複数のコンポーネントで構成されるコンテンツを送信するために、上記コンポーネントを所定の分割単位で分割して生成された複数のユニットの1つを含むパケットを生成する生成装置によるパケットの生成方法であって、上記複数のユニットのうち、上記コンポーネントの再生態様を示し、再生時に参照すべき再生用情報が更新されたユニットを特定する更新ユニット特定ステップと、上記更新ユニット特定ステップで特定したユニットと、上記再生用情報の更新を示す更新情報とを含むパケットを生成するパケット生成ステップとを含むことを特徴としている。 In addition, in order to solve the above-described problem, the generation method of the present invention transmits a plurality of components to a plurality of units generated by dividing the component into predetermined division units. A method for generating a packet by a generating device that generates a packet including one, showing a reproduction mode of the component among the plurality of units, and specifying a unit in which reproduction information to be referred to at the time of reproduction is updated An update unit specifying step, a packet generating step for generating a packet including the unit specified in the update unit specifying step, and update information indicating the update of the reproduction information are included.
上記の構成によれば、複数のユニットのうち、再生時に参照すべき再生用情報が更新されたユニットを特定し、該特定したユニットと、再生用情報の更新を示す更新情報とを含むパケットを生成する。 According to the above configuration, a unit in which the reproduction information to be referred to at the time of reproduction is updated is identified from among the plurality of units, and the packet including the identified unit and update information indicating the update of the reproduction information is included. Generate.
したがって、このパケットを受信した再生装置では、更新情報によって、そのユニットの再生時に参照すべき再生用情報が従前のものから更新されたことを特定することができる。つまり、上記の構成によれば、更新後の再生用情報を参照して再生すべきユニットを含むパケットを受信した再生装置に、そのパケットに含まれるユニットの再生時に参照すべき再生用情報が更新されたことを認識させることができる。 Therefore, in the playback device that has received this packet, the update information can specify that the playback information to be referred to when the unit is played back has been updated from the previous one. That is, according to the above configuration, the reproduction information to be referred to when reproducing the unit included in the packet is updated in the reproduction apparatus that has received the packet including the unit to be reproduced with reference to the updated reproduction information. Can be recognized.
このため、再生装置において、再生用情報の更新が反映されずに誤った再生が行われる可能性を低減することができる。また、再生装置では、更新情報を受信したときから、再生用情報の更新のための準備を開始することができるので、更新後の再生用情報に基づく再生開始をスムーズに行うことができる。 For this reason, it is possible to reduce the possibility that the reproduction apparatus performs erroneous reproduction without reflecting the reproduction information update. In addition, since the playback apparatus can start preparation for updating the playback information after receiving the update information, playback based on the updated playback information can be smoothly started.
なお、上記再生用情報は、ユニットの再生時に参照すべき情報であり、コンポーネントの再生態様を示すものであればよい。例えば、コンポーネントのレイアウトを示すものであってもよいし、コンポーネントの他のコンポーネントとの組み合わせ可否を示すものであってもよいし、これらの両方を示す情報であってもよい。 The reproduction information is information that should be referred to when the unit is reproduced, and may be any information that indicates the component reproduction mode. For example, it may indicate a component layout, may indicate whether a component can be combined with other components, or may indicate information indicating both of them.
また、上記パケット生成手段は、上記更新情報を含むパケットに、該パケットに含まれる上記ユニットの再生の際に参照すべき上記再生用情報を取得するための取得用情報を含めることが好ましい。 The packet generation means preferably includes acquisition information for acquiring the reproduction information to be referred to when reproducing the unit included in the packet in the packet including the update information.
上記の構成によれば、更新情報を含むパケットに、該パケットに含まれるユニットの再生の際に参照すべき再生用情報を取得するための取得用情報を含める。 According to the above configuration, the acquisition information for acquiring the reproduction information to be referred to when reproducing the unit included in the packet is included in the packet including the update information.
したがって、このパケットを受信した再生装置では、更新後の再生用情報の受信が遅延している場合等であっても、取得用情報を用いて再生用情報を取得し、この再生用情報を参照して当該ユニットを再生することができる。 Therefore, the playback device that has received this packet acquires the playback information using the acquisition information, even if the reception of the updated playback information is delayed, and refers to this playback information. Then, the unit can be reproduced.
また、上記生成装置は、更新後の上記再生用情報の取得先を示す取得先情報を含むパケットを生成する再生用情報取得パケット生成手段を備えていることが好ましい。 The generation apparatus preferably includes a reproduction information acquisition packet generation unit that generates a packet including acquisition destination information indicating an acquisition destination of the updated reproduction information.
上記の構成によれば、更新後の上記再生用情報の取得先を示す取得先情報を含むパケットを生成する。したがって、このパケットを受信した再生装置では、取得先情報が示す取得先にアクセスすることによって、更新後の再生用情報を取得することができる。 According to said structure, the packet containing the acquisition destination information which shows the acquisition destination of the said information for reproduction | regeneration after an update is produced | generated. Therefore, the playback apparatus that has received this packet can acquire the updated playback information by accessing the acquisition destination indicated by the acquisition destination information.
これにより、更新後の再生用情報の受信が遅延している場合等であっても、更新後の再生用情報を参照した再生が可能になる。また、再生用情報の再生装置への送信を省略することも可能になる。 As a result, even when reception of the updated reproduction information is delayed, reproduction with reference to the updated reproduction information becomes possible. In addition, it is possible to omit transmission of the reproduction information to the reproduction apparatus.
また、本発明の再生装置は、上記の課題を解決するために、複数のコンポーネントで構成されるコンテンツを、該コンポーネントが所定の分割単位で分割されたユニットとして含まれるパケットとして受信し、再生する再生装置であって、受信したパケットに、上記コンポーネントの再生態様を示し、再生時に参照すべき再生用情報の更新を示す更新情報が含まれていることを検出する検出手段と、上記検出手段が、上記パケットに上記更新情報が含まれていることを検出したときに、当該パケットに含まれる上記ユニットを、更新後の再生用情報に従って再生する再生手段とを備えていることを特徴としている。 In addition, in order to solve the above-described problem, the playback device of the present invention receives and plays back content composed of a plurality of components as a packet included as a unit obtained by dividing the component into predetermined units. A detecting device for detecting that the received packet includes update information indicating a playback mode of the component and indicating an update of playback information to be referred to at the time of playback; When it is detected that the update information is included in the packet, the unit includes reproduction means for reproducing the unit included in the packet according to the updated reproduction information.
そして、本発明の再生方法は、上記の課題を解決するために、複数のコンポーネントで構成されるコンテンツを、該コンポーネントが所定の分割単位で分割されたユニットとして含まれるパケットとして受信し、再生する再生装置による再生方法であって、受信したパケットに、上記コンポーネントの再生態様を示し、再生時に参照すべき再生用情報の更新を示す更新情報が含まれていることを検出する検出ステップと、上記検出ステップで、上記パケットに上記更新情報が含まれていることを検出したときに、当該パケットに含まれる上記ユニットを、更新後の再生用情報に従って再生する再生ステップとを含むことを特徴としている。 Then, in order to solve the above-described problem, the playback method of the present invention receives and plays back content composed of a plurality of components as a packet included as a unit obtained by dividing the component by a predetermined division unit. A playback method by a playback device, the detection step for detecting that the received packet includes update information indicating a playback mode of the component and indicating update of playback information to be referred to during playback, and And a reproduction step of reproducing the unit included in the packet according to the updated reproduction information when it is detected in the detection step that the update information is included in the packet. .
上記の構成によれば、受信したパケットに更新情報が含まれていることを検出したときに、当該パケットに含まれるユニットを、更新後の再生用情報に従って再生するので、再生用情報の更新が反映されずに誤った再生が行われることがない。 According to the above configuration, when it is detected that update information is included in the received packet, the unit included in the packet is reproduced according to the updated reproduction information. There is no possibility of incorrect playback without being reflected.
また、上記再生装置は、上記検出手段が、上記パケットに上記更新情報が含まれていることを検出したときに、当該パケットに含まれる上記ユニットを、更新後の再生用情報に従って再生するための準備処理を行う準備手段を備えていることが好ましい。 In addition, when the detection unit detects that the update information is included in the packet, the playback device plays back the unit included in the packet according to the updated playback information. It is preferable that a preparation means for performing the preparation process is provided.
上記の構成によれば、パケットに更新情報が含まれていることを検出したときに、当該パケットに含まれるユニットを更新後の再生用情報に従って再生するための準備処理を行う。 According to the above configuration, when it is detected that the update information is included in the packet, the preparation process for reproducing the unit included in the packet according to the updated reproduction information is performed.
このように、更新情報を受信したときから、再生用情報の更新のための準備を開始することによって、更新後の再生用情報に基づく再生開始をスムーズに行うことができる。 As described above, by starting preparation for updating the reproduction information after receiving the update information, reproduction based on the updated reproduction information can be smoothly started.
また、本発明のデータ構造は、上記の課題を解決するために、複数のコンポーネントで構成されるコンテンツを送信するためのパケットのデータ構造であって、上記コンポーネントを所定の分割単位で分割して生成された複数のユニットのうち、上記コンポーネントの再生態様を示し、再生時に参照すべき再生用情報が更新されたユニットと、上記再生用情報の更新を示す更新情報とを含むことを特徴としている。 The data structure of the present invention is a data structure of a packet for transmitting content composed of a plurality of components in order to solve the above problems, and the components are divided into predetermined division units. Of the plurality of generated units, the reproduction mode of the component is shown, and includes a unit in which reproduction information to be referred to at the time of reproduction is updated, and update information indicating the update of the reproduction information. .
上記のデータ構造のパケットは、再生用情報が更新されたユニットと、再生用情報の更新を示す更新情報とを含む。このため、このデータ構造のパケットを受信した再生装置では、更新情報によって、そのユニットの再生時に参照すべき再生用情報が従前のものから更新されたことを特定することができる。 The packet having the above data structure includes a unit in which the reproduction information is updated and update information indicating the update of the reproduction information. For this reason, the playback apparatus that has received the packet having this data structure can specify from the update information that the playback information to be referred to during playback of the unit has been updated from the previous one.
したがって、再生装置において、再生用情報の更新が反映されずに誤った再生が行われる可能性を低減することができる。また、再生装置では、更新情報を受信したときから、再生用情報の更新のための準備を開始することができるので、更新後の再生用情報に基づく再生開始をスムーズに行うことができる。 Therefore, it is possible to reduce the possibility that erroneous reproduction is performed without reflecting the update of the reproduction information in the reproduction apparatus. In addition, since the playback apparatus can start preparation for updating the playback information after receiving the update information, playback based on the updated playback information can be smoothly started.
なお、上記生成装置および上記再生装置は、コンピュータによって実現してもよく、この場合には、コンピュータを上記生成装置および上記再生装置の各手段として動作させることにより、上記生成装置および上記再生装置をコンピュータにて実現させる制御プログラム、及びそれを記録したコンピュータ読み取り可能な記録媒体も本発明の範疇に入る。 The generation device and the playback device may be realized by a computer. In this case, the generation device and the playback device are operated by causing the computer to operate as each unit of the generation device and the playback device. A control program realized by a computer and a computer-readable recording medium on which the control program is recorded also fall within the scope of the present invention.
以上のように、本発明の生成装置は、複数のユニットのうち、コンポーネントの再生態様を示し、再生時に参照すべき再生用情報が更新されたユニットを特定する更新ユニット特定手段と、上記更新ユニット特定手段が特定したユニットと、上記再生用情報の更新を示す更新情報とを含むパケットを生成するパケット生成手段とを備えている。 As described above, the generation apparatus according to the present invention includes the update unit specifying means for specifying the unit in which the reproduction information to be referred to at the time of playback is shown, indicating the playback mode of the component among the plurality of units, and the update unit. Packet generating means for generating a packet including the unit specified by the specifying means and update information indicating the update of the reproduction information is provided.
また、本発明の生成方法は、以上のように、複数のユニットのうち、コンポーネントの再生態様を示し、再生時に参照すべき再生用情報が更新されたユニットを特定する更新ユニット特定ステップと、上記更新ユニット特定ステップで特定したユニットと、上記再生用情報の更新を示す更新情報とを含むパケットを生成するパケット生成ステップとを含む構成である。 In addition, as described above, the generation method of the present invention shows a component reproduction mode among a plurality of units, and an update unit specifying step for specifying a unit whose playback information to be referred to at the time of playback is updated; This is a configuration including a packet generation step for generating a packet including the unit specified in the update unit specifying step and the update information indicating the update of the reproduction information.
そして、本発明の再生装置は、以上のように、受信したパケットに、コンポーネントの再生態様を示し、再生時に参照すべき再生用情報の更新を示す更新情報が含まれていることを検出する検出手段と、上記検出手段が、上記パケットに上記更新情報が含まれていることを検出したときに、当該パケットに含まれる上記ユニットを、更新後の再生用情報に従って再生する再生手段とを備えている構成である。 Then, as described above, the playback apparatus of the present invention detects that the received packet contains update information indicating the playback mode of the component and indicating the update of playback information to be referred to during playback. And means for reproducing the unit included in the packet according to the updated reproduction information when the detection means detects that the update information is included in the packet. It is the composition which is.
また、本発明の再生方法は、以上のように、受信したパケットに、コンポーネントの再生態様を示し、再生時に参照すべき再生用情報の更新を示す更新情報が含まれていることを検出する検出ステップと、上記検出ステップで、上記パケットに上記更新情報が含まれていることを検出したときに、当該パケットに含まれる上記ユニットを、更新後の再生用情報に従って再生する再生ステップとを含む構成である。 In addition, as described above, the playback method of the present invention detects that the received packet includes update information indicating the playback mode of the component and indicating the update of playback information to be referred to during playback. And a reproduction step of reproducing the unit included in the packet according to the updated reproduction information when it is detected in the detection step that the update information is included in the packet. It is.
そして、本発明のデータ構造は、以上のように、コンポーネントを所定の分割単位で分割して生成された複数のユニットのうち、上記コンポーネントの再生態様を示し、再生時に参照すべき再生用情報が更新されたユニットと、上記再生用情報の更新を示す更新情報とを含む構成である。 As described above, the data structure of the present invention shows the reproduction mode of the component among a plurality of units generated by dividing the component by a predetermined division unit, and the reproduction information to be referred to at the time of reproduction is The configuration includes an updated unit and update information indicating an update of the reproduction information.
したがって、再生装置において、再生用情報の更新が反映されずに誤った再生が行われる可能性を低減することができる。 Therefore, it is possible to reduce the possibility that erroneous reproduction is performed without reflecting the update of the reproduction information in the reproduction apparatus.
以下、本発明の実施の形態について、図1〜図10に基づいて詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to FIGS.
〔システム構成〕
まず、本実施形態にかかるコンテンツ送受信システムの構成を図1に基づいて説明する。図1は、コンテンツ送受信システム3を構成する送信機(生成装置)1および受信機(再生装置)2の要部構成を示すブロック図である。
〔System configuration〕
First, the configuration of the content transmission / reception system according to the present embodiment will be described with reference to FIG. FIG. 1 is a block diagram showing a main configuration of a transmitter (generating device) 1 and a receiver (reproducing device) 2 that constitute a content transmitting / receiving system 3.
図示のように、コンテンツ送受信システム3は、送信機1と受信機2とがネットワークを介して接続された構成であり、コンテンツ送受信システム3では、送信機1が送信するコンテンツを受信機2が受信して再生する。
As shown in the figure, the content transmission / reception system 3 has a configuration in which a
なお、図示の例では、送信機1と受信機2とが直接通信しているが、これに限られない。例えば、送信機1と受信機2との通信は中継機が中継してもよいし、送信機1から他の配信サーバにコンテンツを配信し、この配信サーバから受信機2にコンテンツを配信してもよい。
In the illustrated example, the
また、ここでは、送信機1と受信機2とを接続するネットワークがインターネットである例を説明するが、このネットワークは送信機1と受信機2とがコンテンツを送受信可能なものであればよく、これに限定されない。例えば、上記ネットワークとして、放送網を適用してもよいし、インターネットと放送網とを併用するハイブリッド配信を採用してもよい。
Here, an example in which the network connecting the
送信機1は、コンテンツを配信する装置であり、送信機1の機能を統括して制御する送信機制御部10、送信機1が送信するデータを格納する送信機記憶部11、および送信機1が外部の装置と通信を行うための送信機通信部12を備えている。
The
また、送信機制御部10は、コンテンツ分割部13、ヘッダ生成部(パケット生成手段)14、およびCI更新判断部(更新ユニット特定手段)15を含み、送信機記憶部11にはコンテンツ16が格納されている。
The
コンテンツ分割部13は、コンテンツ16を配信するために分割する。具体的には、コンテンツのコンポーネントを、例えばメディアユニット単位で分割してペイロードとして格納するデータを生成する。また、コンテンツ16から構成情報(Composition Information:CI、再生用情報)や伝送特性情報(Transport Characteristics:TC)等を特定し抽出する。なお、メディアユニット、構成情報、および伝送特性情報の詳細については後述する。
The
ヘッダ生成部14は、コンテンツ分割部13が生成したデータに付加するヘッダを生成する。具体的には、ヘッダ生成部14は、少なくともペイロードタイプ(payload type)を示す情報を含むペイロードフォーマットヘッダ(Payload Format Header)を生成し、これをメディアユニット、構成情報、および伝送特性情報のそれぞれに付加してペイロードを生成する。また、配信するパケットのそれぞれについて、伝送パケットヘッダ(Transport Packet Header)を生成し、ペイロードにこれを付加して伝送パケットを生成する。
The
CI更新判断部15は、メディアユニットの再生時に参照すべき構成情報が、その直前に配信したメディアユニット(直前に再生されるメディアユニット)の再生時に参照すべき構成情報から更新されているか否かを判断する。そして、更新されていると判断した場合に、その旨をヘッダ生成部14に通知する。この通知を受信したヘッダ生成部14は、構成情報が更新されたことを示す更新情報を含むヘッダを生成する。
The CI
このように、送信機1では、構成情報が更新されたメディアユニットについては、更新情報をヘッダに記述する。これにより、構成情報が更新されたことを受信機2に確実に認識させ、メディアユニットを送信機1側の意図に沿って再生させることができる。
Thus, in the
コンテンツ16は、送信機1が配信するコンテンツである。上述のように、コンテンツ16は、コンテンツ分割部13によって分割され、ヘッダ生成部14にヘッダを付加されて、伝送パケットとして配信される。
一方、受信機2は、コンテンツを受信して再生する装置であり、受信機2の機能を統括して制御する受信機制御部20、受信機2が受信するデータを格納する受信機記憶部21、受信機2が外部の装置と通信を行うための受信機通信部22、画像を表示する表示部23、および音声を出力する音声出力部24を備えている。
On the other hand, the
また、受信機制御部20は、ヘッダ解析部(検出手段)25、デコーダ(準備手段)26、および再生制御部(再生手段)27を含んでいる。
The
ヘッダ解析部25は、受信した伝送パケットのヘッダを解析し、その解析結果に応じた処理を実行する。具体的には、ヘッダ解析部25は、解析したヘッダに上述の更新情報が含まれていることを検出した場合、構成情報が更新されることをデコーダ26に通知し、構成情報の更新準備を行わせる。また、ヘッダ解析部25は、解析したヘッダが、ペイロードとしてメディアユニットを含むことを示している場合には、このペイロードをデコーダ26に送信してデコードさせる。一方、解析したヘッダが、ペイロードとして構成情報を含むことを示している場合には、このペイロードを再生制御部27に送信する。
The
デコーダ26は、受信した伝送パケットに含まれるメディアユニットをデコードする。デコードしたデータは再生制御部27の制御に従って、表示部23および音声出力部24から出力される。また、デコーダ26は、ヘッダ解析部25から、構成情報の更新を通知されたときに、構成情報の更新のための準備処理を行う。
The
再生制御部27は、構成情報に従ってコンポーネントを再生する。具体的には、再生制御部27は、デコーダ26がデコードしたメディアユニットを、構成情報に従って、表示部23および音声出力部24から出力させる。また、再生制御部27は、ヘッダ解析部25が上述の更新情報を検出した場合、そのペイロードに含まれるメディアユニットを、更新後の構成情報に従って再生する。
The
〔コンテンツのデータ構造〕
次に、コンテンツ16のデータ構造を図2に基づいて説明する。図2は、コンテンツ16のデータ構造の一例を示す図である。
[Data structure of content]
Next, the data structure of the
コンテンツ16は、ヘッダ、構成情報(CI)、伝送特性情報(TC)、および複数のアセット(Asset)を含むパッケージ(Package)として送信機記憶部11に格納されている。
The
アセットは、映像、音声、テキスト等のコンポーネントであり、ヘッダと複数のメディアユニット(M−Unit:MU)とで構成されている。また、メディアユニットは、ランダムアクセスやタイムスタンプ付与の単位となるユニットであり、ヘッダと複数のメディアフラグメントユニット(Media Fragment Unit:MFU)とで構成されている。 An asset is a component such as video, audio, and text, and includes a header and a plurality of media units (M-Unit: MU). The media unit is a unit that is a unit for random access and time stamping, and includes a header and a plurality of media fragment units (MFU).
構成情報は、コンポーネントの再生態様を示す。具体的には、構成情報は、各コンポーネントの表示位置、表示サイズなどのレイアウトや、コンポーネント間の組み合わせ可否(他のコンポーネントとの同時再生の可否)などを示す。各メディアユニットは、構成情報を参照して再生される。 The configuration information indicates the playback mode of the component. Specifically, the configuration information indicates a layout such as a display position and a display size of each component, whether or not the components can be combined (whether or not simultaneous reproduction with other components), and the like. Each media unit is reproduced with reference to the configuration information.
伝送特性情報は、各コンポーネントの伝送特性を示す。具体的には、伝送特性情報は、最適配信経路を判断するための各コンポーネントの必要帯域や許容遅延などを示す。 The transmission characteristic information indicates the transmission characteristic of each component. Specifically, the transmission characteristic information indicates a necessary bandwidth and an allowable delay of each component for determining the optimum delivery route.
〔コンテンツの伝送形式〕
続いて、コンテンツ16の伝送形式を図3に基づいて説明する。図3は、コンテンツ16の伝送形式の一例を示す図である。
[Content transmission format]
Next, the transmission format of the
コンテンツ16をTCP/IP、UDP/IP等で伝送する場合、ペイロード(Payload)にヘッダを付加した伝送パケット(Transport Packet)の形式とする。このペイロードのヘッダに、上述の更新情報が記述される。
When the
また、コンテンツ16のパッケージを配信する際のペイロードフォーマットは、図示のように、メディアユニット(MU)、構成情報(CI)、および伝送特性情報(TC)のそれぞれにヘッダを付加した形式である。
The payload format for distributing the package of the
なお、図3のペイロードフォーマットでは、1つのメディアユニットを1つのペイロードとしているが、これに限定されない。例えば、伝送パケットのサイズに制約がある場合には、メディアユニットをさらに分割してそれぞれを異なるペイロードとして伝送してもよいし、複数のメディアユニットをまとめて1つのペイロードとして伝送してもよい。この場合、ペイロードフォーマットヘッダに、メディアユニットを構成する最初のメディアフラグメントユニットを含むか否かを示すフラグ、メディアユニットを構成する最後のメディアフラグメントユニットを含むか否かを示すフラグ等を記述する構成としてもよい。 In the payload format of FIG. 3, one media unit is used as one payload. However, the present invention is not limited to this. For example, when there is a restriction on the size of the transmission packet, the media unit may be further divided and transmitted as different payloads, or a plurality of media units may be transmitted together as one payload. In this case, the payload format header describes a flag indicating whether or not the first media fragment unit constituting the media unit is included, a flag indicating whether or not the last media fragment unit constituting the media unit is included, and the like. It is good.
〔更新情報の詳細〕
続いて、更新情報の詳細について、図4に基づいて説明する。図4は、更新情報を含む伝送パケットの一例を示す図である。
[Details of update information]
Next, details of the update information will be described with reference to FIG. FIG. 4 is a diagram illustrating an example of a transmission packet including update information.
同図では、連続して配信する2つの伝送パケットを示しており、先に配信する伝送パケットのペイロードをAi,j−1、次に配信する伝送パケットのペイロードをAi,jとしている。 In the figure, two transmission packets that are continuously distributed are shown, and the payload of the transmission packet that is distributed first is A i, j−1 , and the payload of the transmission packet that is distributed next is A i, j .
これらのペイロードは、何れもi番目のアセットに対応しており、Ai,j−1はこのアセットのj−1番目のメディアユニットを含み、Ai,jはこのアセットのj番目のメディアユニットを含んでいる。そして、このAi,j−1が含むメディアユニットの再生時に参照すべき構成情報と、Ai,jが含むメディアユニットの再生時に参照すべき構成情報とは異なっている。 Each of these payloads corresponds to the i-th asset, A i, j−1 includes the j−1th media unit of this asset , and A i, j is the jth media unit of this asset. Is included. The configuration information to be referred to when the media unit included in A i, j-1 is reproduced is different from the configuration information to be referred to when the media unit included in A i, j is reproduced.
このように、参照すべき構成情報がそれ以前のペイロードとは異なるペイロードについては、構成情報が更新されたことを示す更新情報をそのヘッダに記述する。 As described above, for the payload whose configuration information to be referred to is different from the previous payload, update information indicating that the configuration information has been updated is described in its header.
図示の例では、フラグ(composition_update_indicator)をペイロードのヘッダに記述することにより、当該ペイロードに含まれるメディアユニットの再生の際に参照する構成情報が、直前のペイロードから更新されたか否かを示している。 In the example shown in the figure, a flag (composition_update_indicator) is described in the header of the payload to indicate whether or not the configuration information to be referred to when reproducing the media unit included in the payload has been updated from the immediately preceding payload. .
具体的には、同図のAi,j−1のペイロードのヘッダには、composition_update_indicator=‘0’と記述されており、これは構成情報が更新されていないことを示している。一方、Ai,jのペイロードのヘッダには、composition_update_indicator=‘1’と記述されており、これは構成情報が更新されたことを示している。 Specifically, composition_update_indicator = '0' is described in the payload header of A i, j-1 in the figure, which indicates that the configuration information has not been updated. On the other hand, composition_update_indicator = '1' is described in the payload header of A i, j , which indicates that the configuration information has been updated.
受信機2は、このフラグの値を確認することにより、各ペイロードに含まれるメディアユニットを正しい構成情報に基づいて再生することができる。すなわち、受信機2は、composition_update_indicator=‘0’と記述されているペイロードに含まれるメディアユニットについては、参照する構成情報を変更することなく再生する。一方、composition_update_indicator=‘1’と記述されているペイロードに含まれるメディアユニットについては、参照する構成情報を変更して再生する。
The
以上のように、更新後の構成情報に基づいて再生すべきメディアユニットと更新情報とを含む伝送パケットのデータ構造によれば、受信機2において、構成情報の更新が反映されずに誤った再生が行われる可能性を低減することができる。
As described above, according to the data structure of the transmission packet including the media unit to be reproduced based on the updated configuration information and the update information, the
〔構成情報の更新の具体例〕
次に、構成情報の更新の具体例を図5に基づいて説明する。図5は、構成情報を更新することによってアセットの表示レイアウトを更新する例を示す図である。
[Specific example of configuration information update]
Next, a specific example of the configuration information update will be described with reference to FIG. FIG. 5 is a diagram illustrating an example of updating the display layout of assets by updating the configuration information.
図示のように、更新前の表示レイアウトでは、アセット1がメインコンポーネントとして全画面表示されており、アセット2はサブコンポーネントとして1/2に縮小されて画面の左上に表示されている。この表示レイアウトは、同図に示す構成情報(更新前)に基づいて実現される。
As shown in the figure, in the display layout before the update,
すなわち、構成情報(更新前)では、<layout>タグによって、領域r1(全画面表示に対応)および領域r2(表示画面を縦横に4分割した左上領域に対応)が定義されている。そして、アセットの組み合わせ表示を指定する<combi>タグによって、領域r1に対してアセット1が対応付けられ、領域r2に対してアセット2が対応付けられている。また、このレイアウトを時刻0sから適用することを示す記述(start="0s")が含まれている。
That is, in the configuration information (before update), an area r1 (corresponding to full screen display) and an area r2 (corresponding to an upper left area obtained by dividing the display screen into four vertically and horizontally) are defined by the <layout> tag. Then, the
このため、受信機2は、アセット1および2を含むコンテンツの再生開始と同時に(0sから)、同図に示すように、アセット1を全画面表示し、アセット2を1/2に縮小して画面の左上に表示する。
For this reason, the
一方、構成情報(更新後)では、<combi>タグの記述が更新されている。すなわち、構成情報(更新後)では、アセット1は領域r2に対応付けられており、アセット2は領域r1に対応付けられている。また、このレイアウトを時刻15mから開始することを示す記述(start="15m")が含まれている。
On the other hand, in the configuration information (after update), the description of the <combi> tag is updated. That is, in the configuration information (after update),
このため、受信機2は、時刻15mに、同図の表示レイアウトに示すように、アセット2をメインコンポーネントとして全画面表示し、アセット1をサブコンポーネントとして1/2に縮小して画面の左上に表示する。このように、構成情報を更新することによって、アセットの表示レイアウトを変更することができる。
Therefore, at
この場合、更新後の構成情報に基づく再生が確実に行われるように、更新後の構成情報に基づいて再生すべきメディアユニットのうち再生時間が最先のものについては、構成情報が更新されたことを示す更新情報を対応付ける。具体的には、図示の例では、時刻15mに対応するメディアユニット(アセット1のメディアユニットおよびアセット2のメディアユニット)を含む各伝送パケットのヘッダにcomposition_update_indicator=‘1’のフラグを付加する。また、それ以外の伝送パケットのヘッダにはcomposition_update_indicator=‘0’のフラグを付加する。
In this case, the configuration information is updated for the media unit that has the earliest playback time among the media units that should be played based on the updated configuration information so that playback based on the updated configuration information is performed. Is associated with the update information. Specifically, in the illustrated example, a flag of composition_update_indicator = '1' is added to the header of each transmission packet including a media unit (media unit of
続いて、構成情報の更新の他の例を図6に基づいて説明する。図6は、構成情報を更新することによってアセットの組み合わせ表示の可否を変更する例を示す図である。 Next, another example of updating the configuration information will be described with reference to FIG. FIG. 6 is a diagram illustrating an example of changing the availability of asset combination display by updating the configuration information.
図6の構成情報(更新前)では、<layout>タグによって、領域r1(表示画面を縦横に4分割した左上領域)および領域r2(表示画面を縦横に4分割した右上領域)が定義されている。そして、<combi>タグによって、領域r1に対してアセット1が対応付けられ、領域r2に対してアセット2が対応付けられている。また、このレイアウトを時刻0sから適用することを示す記述(start="0s")が含まれている。
In the configuration information in FIG. 6 (before update), an area r1 (upper left area obtained by dividing the display screen into four parts in the vertical and horizontal directions) and an area r2 (upper right area obtained by dividing the display screen into four parts in the vertical and horizontal directions) are defined by the <layout> tag. Yes. The <combi> tag associates
このため、受信機2は、再生開始と同時に(0sから)、同図の表示レイアウトに示すように、アセット1を表示画面を4分割した左上領域に表示し、アセット2を表示画面を4分割した右上領域に表示する。
Therefore, simultaneously with the start of playback (from 0s), the
一方、構成情報(更新後)では、<layout>タグの記述が更新されている。また、<combi>タグの代わりにアセットの相互排他的(Mutually Exclusive)表示を指定する<excl>タグが記述されている。 On the other hand, in the configuration information (after update), the description of the <layout> tag is updated. In addition, an <excl> tag for designating a mutually exclusive display of assets is described instead of the <combi> tag.
具体的には、更新後の<layout>タグでは、領域r0(全画面表示に対応)が定義されている。また、<excl>タグにより、アセット1を領域r0に表示するか、アセット2を領域r0に表示するかの何れか一方が可能であることが定義されている。また、この表示を時刻15mから適用することを示す記述(start="15m")が含まれている。
Specifically, the updated <layout> tag defines an area r0 (corresponding to full screen display). The <excl> tag defines that either
このため、受信機2は、時刻15mに、同図の表示レイアウトに示すように、アセット1をメインコンポーネントとして全画面表示するか、またはアセット2をメインコンポーネントとして全画面表示する。このように、構成情報を更新することによって、アセットの組み合わせ表示の可否を変更することもできる。
For this reason, the
この場合も、更新後の構成情報に基づく再生が確実に行われるように、更新後の構成情報に基づいて再生すべきメディアユニットについては、構成情報が更新されたことを示す更新情報を対応付ける。具体的には、時刻15mに対応するメディアユニット(アセット1のメディアユニットおよびアセット2のメディアユニット)を含む各伝送パケットのヘッダにcomposition_update_indicator=‘1’のフラグを付加する。また、それ以外の伝送パケットのヘッダにはcomposition_update_indicator=‘0’のフラグを付加する。
Also in this case, the media unit to be played back based on the updated configuration information is associated with update information indicating that the configuration information has been updated so that playback based on the updated configuration information is performed reliably. Specifically, a flag of composition_update_indicator = ‘1’ is added to the header of each transmission packet including the media unit (media unit of
なお、図5および図6ではSMIL(Synchronized Multimedia Integration Language)によって構成情報を記述した例を示しているが、構成情報はアセットの表示態様を示すものであればよく、その記述形式は特に限定されない。 5 and 6 show examples in which configuration information is described in SMIL (Synchronized Multimedia Integration Language). However, the configuration information only needs to indicate an asset display mode, and the description format is not particularly limited. .
〔伝送パケット生成処理の流れ〕
次に、送信機1が実行する伝送パケット生成処理(生成方法)の流れを図7に基づいて説明する。図7は、伝送パケット生成処理の一例を示すフローチャートである。なお、伝送パケット生成処理を行うタイミングは特に限定されない。例えばオンデマンド配信では、受信機2からコンテンツの送信要求を受信したとき、ライブ配信ではコンテンツをエンコードする際に行えばよい。
[Flow of transmission packet generation processing]
Next, a flow of transmission packet generation processing (generation method) executed by the
以下では、送信機記憶部11に既に記録されているコンテンツ16をオンデマンド配信する場合の伝送パケット生成処理の流れについて説明する。
Below, the flow of the transmission packet generation process when the
まず、コンテンツ分割部13は、送信機記憶部11に格納されているコンテンツ16を読み出して、ペイロード(厳密には図3における伝送パケットのペイロード部分に格納するデータ)を生成する。具体的には、コンテンツ分割部13は、図2に示したようにパッケージとして格納されているコンテンツ16からアセットを取得し、取得したアセットを分割して複数のペイロードを生成する(S1)。そして、コンテンツ分割部13は、上記のようにして生成した複数のペイロードをヘッダ生成部14に出力する。
First, the
なお、ペイロードへの分割単位はメディアユニットに限定されない。例えば、ペイロードのサイズに制約がある場合、メディアユニットを所定のサイズでさらに分割したものをペイロードとしてもよい。また、分割のオーバーヘッドをできるだけ小さくしたい場合等には、複数のメディアユニットをまとめて1つのペイロードとしてもよい。また、コンテンツ分割部13は、パッケージに含まれる構成情報(CI)や伝送特性情報(TC)についてもコンテンツ16より抽出して、ヘッダ生成部14に出力する。
Note that the unit for dividing the payload is not limited to the media unit. For example, when there is a restriction on the size of the payload, the media unit further divided by a predetermined size may be used as the payload. Further, when it is desired to reduce the division overhead as much as possible, a plurality of media units may be combined into one payload. The
次に、ヘッダ生成部14は、入力された複数のペイロードから、ペイロードタイプを示す情報を含むペイロードフォーマットを生成する(S2)。具体的には、ヘッダ生成部14は、ペイロードタイプがメディアユニットであることを示す情報(payload_type=MU)を記述したペイロードフォーマットヘッダを生成し、これを各メディアユニットに付加して、図3に示したようなペイロードフォーマットを生成する。
Next, the
なお、ペイロードフォーマットのペイロードタイプは、コンテンツ分割部13から受信したデータに応じたものとする。例えば、コンテンツ分割部13から構成情報が入力された場合には、ペイロードタイプが構成情報であることを示す情報(payload_type=CI)を記述したペイロードフォーマットヘッダを生成する。同様に、伝送特性情報(TC)が入力された場合には、伝送特性情報であることを示す情報(payload_type=TC)を記述したペイロードフォーマットヘッダを生成する。
Note that the payload type of the payload format corresponds to the data received from the
次に、ヘッダ生成部14は、CI更新判断部15に指示して、S2で生成したペイロードフォーマットに対応するメディアユニットの構成情報が更新されているか判断させる(S3、更新ユニット特定ステップ)。
Next, the
CI更新判断部15は、当該メディアユニットのタイムスタンプと、更新後のCIに記述されている構成情報が変更される時刻(図5の例では時刻15m)とを比較することによって、当該メディアユニットの構成情報が更新されているか判断する。
The CI
すなわち、CI更新判断部15は、更新後のCIに記述されている、構成情報の変更時刻に対応するタイムスタンプを持つメディアユニットについては、構成情報が更新されていると判断する。一方、上記以外のメディアユニットについては、構成情報が更新されていないと判断する。
That is, the CI
なお、送信機記憶部11に記録されたコンテンツを配信するのではなく、ライブ配信等でリアルタイムにコンテンツをエンコードしながら配信する場合には、レイアウトなどの再生条件(再生態様)の変更を指示するユーザ入力に基づいて構成情報が更新されたことを判断する。つまり、上記のユーザ入力が行われた直後に処理するメディアユニットについて、構成情報が更新されていると判断する。
In addition, when the content recorded in the
ヘッダ生成部14は、この判断結果に応じて、composition_update_indicatorの値を決定する。すなわち、CI更新判断部15が構成情報が更新されていないと判断した場合(S3でNO)、ヘッダ生成部14は、composition_update_indicator=‘0’と決定する(S4)。一方、構成情報が更新されていると判断した場合(S3でYES)、ヘッダ生成部14は、composition_update_indicator=‘1’と決定する(S5)。
The
続いて、ヘッダ生成部14は、S4またはS5で決定した値のcomposition_update_indicatorを含む伝送パケットを生成する(S6、パケット生成ステップ)。具体的には、ヘッダ生成部14は、composition_update_indicator=‘0’またはcomposition_update_indicator=‘1’の記述を含む伝送パケットヘッダを生成し、これをS2で生成したペイロードフォーマットに付加して、図3に示したような伝送パケットを生成する。
Subsequently, the
そして、ヘッダ生成部14は、生成した伝送パケットを送信機通信部12に出力し(S7)、伝送パケット生成処理は終了する。これにより、上記のようにして生成された伝送パケットは、ネットワークを介して受信機2に送信される。
Then, the
〔再生処理の流れ〕
続いて、受信機2が実行する再生処理(再生方法)の流れを図8に基づいて説明する。図8は、再生処理の一例を示すフローチャートである。なお、図8では、1つの伝送パケットについて、その受信から出力までの処理を示している。
[Flow of playback processing]
Next, the flow of the reproduction process (reproduction method) executed by the
受信機通信部22は、送信機1の送信機通信部12から送信された伝送パケットを、ネットワーク経由で受信し(S10)、この伝送パケットをヘッダ解析部25に出力する。そして、ヘッダ解析部25は、受信した伝送パケットのヘッダ(伝送パケットヘッダ)を解析し(S11)、composition_update_indicator=‘1’であるか判断する(S12、検出ステップ)。
The
この解析の結果、composition_update_indicator=‘1’であることが確認された場合(S12でYES)、ヘッダ解析部25は、構成情報が更新されることをデコーダ26に通知する(S13)。この通知を受信したデコーダ26は、構成情報の更新に必要な処理(例えば、画像拡大縮小モジュールの初期化など)を実行する。この後、処理はS14に進む。一方、composition_update_indicator=‘0’であることが確認された場合(S12でNO)、S13の処理は行わずにS14の処理に進む。
As a result of this analysis, when it is confirmed that composition_update_indicator = '1' (YES in S12), the
S14では、ヘッダ解析部25は、ペイロードフォーマットヘッダを解析する。この解析の結果、payload_type==MUであることが確認された場合(S15でYES)、このペイロードフォーマットヘッダが付加されている伝送パケットに含まれるメディアユニットをデコーダ26に出力する(S16)。
In S14, the
これにより、このメディアユニットがデコードされて、再生制御部27の制御により、構成情報に従って、表示部23および/または音声出力部24から出力され(再生ステップ)、再生処理は終了する。無論、composition_update_indicator=‘1’のヘッダが付加されたメディアユニットの再生の際に参照する構成情報は、更新後の構成情報である。
As a result, the media unit is decoded and output from the
一方、S14の解析の結果、payload_type==MUではないことが確認された場合(S15でNO)、payload_typeに従ってペイロードを各処理部に出力する(S17)。例えば、payload_type==CIであれば、ペイロードは構成情報を含むため、これを再生制御部27に送信して設定を行わせる。これにより、再生処理は終了する。
On the other hand, if it is confirmed as a result of the analysis in S14 that payload_type == MU (NO in S15), the payload is output to each processing unit according to the payload_type (S17). For example, if payload_type == CI, since the payload includes configuration information, it is transmitted to the
上述の再生処理では、composition_update_indicatorの値を確認した後で、そのヘッダに含まれるメディアユニットを再生するので、更新後の構成情報を参照して再生すべきメディアユニットを更新前の構成情報を参照して再生することを防ぐことができる。 In the playback process described above, after confirming the value of composition_update_indicator, the media unit included in the header is played back, so the media unit to be played back is referred to the configuration information before the update by referring to the updated configuration information. To prevent playback.
また、構成情報の更新を伝送パケットヘッダの解析の段階でデコーダ26へ通知(S13)して、構成情報の更新に必要な処理を実行させるので、構成情報の更新のための処理によって、メディアユニットの再生が遅延することを防ぐことができる。
Further, the update of the configuration information is notified to the
〔変形例:構成情報を更新するためのURLの送信〕
以上のように、更新情報を記述することにより、受信機2は構成情報が更新されたことを認識することができる。しかしながら、更新後の構成情報の受信が遅延している場合等には、更新後の構成情報に基づく再生を開始することができない。
[Modification: Transmission of URL for updating configuration information]
As described above, by describing the update information, the
そこで、更新後の構成情報に基づいて再生すべきメディアユニットについては、更新情報と共に、更新後の構成情報を取得するための取得用情報を対応付けて配信してもよい。これについて、図9に基づいて説明する。図9は、構成情報を取得するためのURLを含む伝送パケットヘッダの構造(シンタックス)の一例を示す図である。 Therefore, for media units to be played based on the updated configuration information, acquisition information for acquiring the updated configuration information may be associated with the update information and distributed. This will be described with reference to FIG. FIG. 9 is a diagram illustrating an example of a structure (syntax) of a transmission packet header including a URL for acquiring configuration information.
図示の伝送パケットヘッダ構造では、1ビットのフラグcomposition_update_indicatorの後、composition_update_indicator==‘1’の場合に、URL(取得用情報)を含むか否かを示す1ビットのフラグcontains_urlが続く。contains_url==‘1’の場合、URLの長さ(バイト長)を示す14ビットの値url_len、およびURLを示すurl_lenバイト(url_len*8ビット)の文字列url[i](i=0, 1, …, url_len-1)が続く。このURL(またはURI)は、更新後の構成情報のリクエスト先を示している。なお、URLに関するこれらの情報は、図7のS5において記述すればよい。 In the illustrated transmission packet header structure, a 1-bit flag contains_url indicating whether or not a URL (acquisition information) is included when composition_update_indicator == '1' follows the 1-bit flag composition_update_indicator. When contains_url == '1', a 14-bit value url_len indicating the URL length (byte length) and a url_len byte (url_len * 8 bits) character string url [i] (i = 0, 1) indicating the URL ,…, Url_len-1). This URL (or URI) indicates the request destination of the updated configuration information. Note that these pieces of information relating to the URL may be described in S5 of FIG.
受信機2は、composition_update_indicator==‘1’の伝送パケットを受信した場合、この伝送パケットに含まれるメディアユニットは、従前とは異なる構成情報に基づいて再生する必要がある。更新後の構成情報が受信されていない場合、contains_url==‘1’であれば、url[]で示されるURLにアクセスすることで、更新後の構成情報を取得することができる。
When the
また、最新の構成情報の取得先を示す取得先情報を初期の構成情報等に記述しておき、受信機2が、composition_update_indicator=‘1’のパケットを受信したときに、この取得先情報が示す取得先から構成情報を取得して更新するようにしてもよい。
Further, acquisition source information indicating the acquisition source of the latest configuration information is described in the initial configuration information and the acquisition source information indicates when the
これについて、図10に基づいて説明する。図10は、最新の構成情報を取得するためのURL(取得先情報)を含む構成情報の一例を示す図である。図示の構成情報では、<location>タグにより、最新の構成情報を取得するためのURLを記述している。 This will be described with reference to FIG. FIG. 10 is a diagram illustrating an example of configuration information including a URL (acquisition destination information) for acquiring the latest configuration information. In the illustrated configuration information, a URL for acquiring the latest configuration information is described by a <location> tag.
この構成情報を受信した受信機2では、まず、この構成情報に基づいてコンテンツの再生を行う。この構成情報に基づく再生は、受信した伝送パケットヘッダにおいて、composition_update_indicator=‘0’である期間中継続する。
The
そして、受信した伝送パケットヘッダにおいて、composition_update_indicator=‘1’であることが確認されたときには、ヘッダ解析部25は、デコーダ26に構成情報の更新を通知して、更新の準備を行わせる(図8のS13)。また、このときに、ヘッダ解析部25は、上記のURLに対してリクエストを行って新たな構成情報を取得し、これを再生制御部27に通知してコンポジションの設定を更新させる。
When it is confirmed that composition_update_indicator = '1' in the received transmission packet header, the
受信機2における上記のような処理を実現するため、送信機1の送信機制御部10は、上記のような取得先情報を含むパケット(例えば上記URLを含む構成情報をペイロードとする伝送パケット)を生成する再生用情報取得パケット生成手段を備えていればよい。これにより、何らかの原因によって受信機2が更新後の構成情報が受信できなかった場合であっても、このURLにより、構成情報を更新させることができる。
In order to realize the processing as described above in the
また、更新後の構成情報を含む伝送パケットを送信する必要もなくなるため、更新後の構成情報を含む伝送パケットの生成および送信を行わないようにして、送信機1から送信するデータ量を減らすこともできる。なお、構成情報を更新する処理の主体は、送信機1であってもよいし、他の装置であってもよい。
In addition, since it is not necessary to transmit a transmission packet including the updated configuration information, the amount of data transmitted from the
〔伝送パケットの配信を行う主体について〕
上記では、伝送パケットの生成と配信とを何れも送信機1が行う例を説明したが、伝送パケットの生成と配信とを別の装置が行うようにしてもよい。また、伝送パケットの生成と配信とをそれぞれ複数の装置が行うようにしてもよい。例えば、ある装置において放送配信用コンテンツの伝送パケットを生成し、他の装置においてオンデマンド配信用(例えば通信配信用)コンテンツの伝送パケットを生成してもよい。この場合、ある装置と他の装置の何れかにおいて、更新情報を含む伝送パケットを生成すればよい。
[About the entity that distributes transmission packets]
In the above description, an example in which the
本発明は上述した実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能である。すなわち、請求項に示した範囲で適宜変更した技術的手段を組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。 The present invention is not limited to the above-described embodiments, and various modifications can be made within the scope shown in the claims. That is, embodiments obtained by combining technical means appropriately modified within the scope of the claims are also included in the technical scope of the present invention.
〔ソフトウェアによる実現例について〕
最後に、送信機1および受信機2の各ブロック、特に送信機制御部10および受信機制御部20は、集積回路(ICチップ)上に形成された論理回路によってハードウェア的に実現してもよいし、CPU(Central Processing Unit)を用いてソフトウェア的に実現してもよい。
[Examples of software implementation]
Finally, each block of the
後者の場合、送信機1および受信機2は、各機能を実現するプログラムの命令を実行するCPU、上記プログラムを格納したROM(Read Only Memory)、上記プログラムを展開するRAM(Random Access Memory)、上記プログラムおよび各種データを格納するメモリ等の記憶装置(記録媒体)などを備えている。そして、本発明の目的は、上述した機能を実現するソフトウェアである送信機1および受信機2の制御プログラムのプログラムコード(実行形式プログラム、中間コードプログラム、ソースプログラム)をコンピュータで読み取り可能に記録した記録媒体を、送信機1および受信機2に供給し、そのコンピュータ(またはCPUやMPU)が記録媒体に記録されているプログラムコードを読み出し実行することによっても、達成可能である。
In the latter case, the
上記記録媒体としては、例えば、磁気テープやカセットテープ等のテープ類、フロッピー(登録商標)ディスク/ハードディスク等の磁気ディスクやCD−ROM/MO/MD/DVD/CD−R等の光ディスクを含むディスク類、ICカード(メモリカードを含む)/光カード等のカード類、マスクROM/EPROM/EEPROM/フラッシュROM等の半導体メモリ類、あるいはPLD(Programmable logic device)やFPGA(Field Programmable Gate Array)等の論理回路類などを用いることができる。 Examples of the recording medium include tapes such as magnetic tapes and cassette tapes, magnetic disks such as floppy (registered trademark) disks / hard disks, and disks including optical disks such as CD-ROM / MO / MD / DVD / CD-R. IC cards (including memory cards) / optical cards, semiconductor memories such as mask ROM / EPROM / EEPROM / flash ROM, PLD (Programmable logic device), FPGA (Field Programmable Gate Array), etc. Logic circuits can be used.
また、送信機1および受信機2を通信ネットワークと接続可能に構成し、上記プログラムコードを通信ネットワークを介して供給してもよい。この通信ネットワークは、プログラムコードを伝送可能であればよく、特に限定されない。例えば、インターネット、イントラネット、エキストラネット、LAN、ISDN、VAN、CATV通信網、仮想専用網(Virtual Private Network)、電話回線網、移動体通信網、衛星通信網等が利用可能である。また、この通信ネットワークを構成する伝送媒体も、プログラムコードを伝送可能な媒体であればよく、特定の構成または種類のものに限定されない。例えば、IEEE1394、USB、電力線搬送、ケーブルTV回線、電話線、ADSL(Asymmetric Digital Subscriber Line)回線等の有線でも、IrDAやリモコンのような赤外線、Bluetooth(登録商標)、IEEE802.11無線、HDR(High Data Rate)、NFC(Near Field Communication)、DLNA(Digital Living Network Alliance)、携帯電話網、衛星回線、地上波デジタル網等の無線でも利用可能である。なお、本発明は、上記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。
Further, the
本発明は、ネットワークを介してコンテンツを送信する送信機、およびネットワークを介してコンテンツを受信する受信機に利用することができる。 The present invention can be used for a transmitter that transmits content via a network and a receiver that receives content via a network.
1 送信機(生成装置)
2 受信機(再生装置)
14 ヘッダ生成部(パケット生成手段)
15 CI更新判断部(更新ユニット特定手段)
16 コンテンツ
25 ヘッダ解析部(検出手段)
26 デコーダ(準備手段)
27 再生制御部(再生手段)
1 Transmitter (Generator)
2 Receiver (Reproducing device)
14 Header generator (packet generator)
15 CI update determination unit (update unit specifying means)
16
26 Decoder (Preparation means)
27 Reproduction control unit (reproduction means)
Claims (11)
上記複数のユニットのうち、上記コンポーネントの再生態様を示し、再生時に参照すべき再生用情報が更新されたユニットを特定する更新ユニット特定手段と、
上記更新ユニット特定手段が特定したユニットと、上記再生用情報の更新を示す更新情報とを含むパケットを生成するパケット生成手段とを備えていることを特徴とする生成装置。 A generation device that generates a packet including one of a plurality of units generated by dividing the component by a predetermined division unit in order to transmit content composed of a plurality of components,
Of the plurality of units, an update unit specifying unit that indicates a playback mode of the component and specifies a unit in which playback information to be referred to at the time of playback is updated;
A generation apparatus comprising: a packet generation unit configured to generate a packet including a unit identified by the update unit identification unit and update information indicating an update of the reproduction information.
受信したパケットに、上記コンポーネントの再生態様を示し、再生時に参照すべき再生用情報の更新を示す更新情報が含まれていることを検出する検出手段と、
上記検出手段が、上記パケットに上記更新情報が含まれていることを検出したときに、当該パケットに含まれる上記ユニットを、更新後の再生用情報に従って再生する再生手段とを備えていることを特徴とする再生装置。 A playback device that receives and plays back content composed of a plurality of components as a packet that is included as a unit in which the component is divided by a predetermined division unit,
Detection means for detecting that the received packet includes update information indicating the reproduction mode of the component and indicating update of reproduction information to be referred to at the time of reproduction;
When the detection means detects that the update information is included in the packet, the detection means includes reproduction means for reproducing the unit included in the packet according to the updated reproduction information. A playback device.
上記コンポーネントを所定の分割単位で分割して生成された複数のユニットのうち、上記コンポーネントの再生態様を示し、再生時に参照すべき再生用情報が更新されたユニットと、上記再生用情報の更新を示す更新情報とを含むことを特徴とするデータ構造。 A data structure of a packet for transmitting content composed of a plurality of components,
Of a plurality of units generated by dividing the component by a predetermined division unit, a reproduction mode of the component is shown, and a unit in which reproduction information to be referred to at the time of reproduction is updated, and the reproduction information is updated. A data structure including update information to be indicated.
上記複数のユニットのうち、上記コンポーネントの再生態様を示し、再生時に参照すべき再生用情報が更新されたユニットを特定する更新ユニット特定ステップと、
上記更新ユニット特定ステップで特定したユニットと、上記再生用情報の更新を示す更新情報とを含むパケットを生成するパケット生成ステップとを含むことを特徴とする生成方法。 A method for generating a packet by a generating device that generates a packet including one of a plurality of units generated by dividing the component by a predetermined division unit in order to transmit content composed of a plurality of components. ,
An update unit specifying step for showing a playback mode of the component among the plurality of units and specifying a unit in which playback information to be referred to at the time of playback is updated;
A generation method comprising: a packet generation step of generating a packet including the unit specified in the update unit specifying step and update information indicating update of the reproduction information.
受信したパケットに、上記コンポーネントの再生態様を示し、再生時に参照すべき再生用情報の更新を示す更新情報が含まれていることを検出する検出ステップと、
上記検出ステップで、上記パケットに上記更新情報が含まれていることを検出したときに、当該パケットに含まれる上記ユニットを、更新後の再生用情報に従って再生する再生ステップとを含むことを特徴とする再生方法。 A playback method by a playback device that receives and plays back content composed of a plurality of components as a packet that is included as a unit in which the component is divided by a predetermined division unit,
A detection step for detecting that the received packet includes update information indicating a reproduction mode of the component and indicating update of reproduction information to be referred to at the time of reproduction;
A reproduction step of reproducing the unit included in the packet according to the updated reproduction information when the detection step detects that the update information is included in the packet. How to play.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012017299A JP2015065488A (en) | 2012-01-30 | 2012-01-30 | Generation apparatus, reproduction apparatus, data structure, generation method, reproduction method, control program, and recording medium |
PCT/JP2013/050520 WO2013114939A1 (en) | 2012-01-30 | 2013-01-15 | Generation device, reproduction device, data structure, generation method, reproduction method, control program, and recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012017299A JP2015065488A (en) | 2012-01-30 | 2012-01-30 | Generation apparatus, reproduction apparatus, data structure, generation method, reproduction method, control program, and recording medium |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2015065488A true JP2015065488A (en) | 2015-04-09 |
Family
ID=48904982
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012017299A Pending JP2015065488A (en) | 2012-01-30 | 2012-01-30 | Generation apparatus, reproduction apparatus, data structure, generation method, reproduction method, control program, and recording medium |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP2015065488A (en) |
WO (1) | WO2013114939A1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017018794A1 (en) * | 2015-07-27 | 2017-02-02 | 엘지전자 주식회사 | Method and device for transmitting metadata in wfd |
JP2019149086A (en) * | 2018-02-28 | 2019-09-05 | 日本電信電話株式会社 | Data processing apparatus and data transfer method |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6323805B2 (en) * | 2013-04-04 | 2018-05-16 | 日本放送協会 | Reception device, transmission device, and reception program |
JP6302274B2 (en) * | 2014-02-07 | 2018-03-28 | 日本放送協会 | Transmitting apparatus and receiving apparatus |
EP3117626A4 (en) * | 2014-03-13 | 2017-10-25 | Verance Corporation | Interactive content acquisition using embedded codes |
WO2016028936A1 (en) | 2014-08-20 | 2016-02-25 | Verance Corporation | Watermark detection using a multiplicity of predicted patterns |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002262286A (en) * | 2001-03-02 | 2002-09-13 | Canon Inc | Data transmission method, data transmitter, data reproduction method and reproducing device |
CN107360130B (en) * | 2010-04-20 | 2021-05-07 | 三星电子株式会社 | Interface apparatus and method for transmitting and receiving media data |
KR20120138319A (en) * | 2011-06-14 | 2012-12-26 | 삼성전자주식회사 | Apparatus and method for transmitting data packet of multimedia service using transport characteristics |
KR20120138693A (en) * | 2011-06-14 | 2012-12-26 | 삼성전자주식회사 | Method and apparatus for composing content in a broadcast system |
-
2012
- 2012-01-30 JP JP2012017299A patent/JP2015065488A/en active Pending
-
2013
- 2013-01-15 WO PCT/JP2013/050520 patent/WO2013114939A1/en active Application Filing
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017018794A1 (en) * | 2015-07-27 | 2017-02-02 | 엘지전자 주식회사 | Method and device for transmitting metadata in wfd |
US10750215B2 (en) | 2015-07-27 | 2020-08-18 | Lg Electronics Inc. | Method and device for transmitting metadata in WFD |
JP2019149086A (en) * | 2018-02-28 | 2019-09-05 | 日本電信電話株式会社 | Data processing apparatus and data transfer method |
Also Published As
Publication number | Publication date |
---|---|
WO2013114939A1 (en) | 2013-08-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20200274918A1 (en) | Method and apparatus for transmitting and receiving content | |
US20200228456A1 (en) | Generation device | |
WO2013114939A1 (en) | Generation device, reproduction device, data structure, generation method, reproduction method, control program, and recording medium | |
EP3220653B1 (en) | Reception device, reception method, transmission device, and transmission method for layer-coded services using route sessions | |
US20140181243A1 (en) | Server-based content tracking apparatus and method | |
US20150089558A1 (en) | Content data recording device, content data recording method, recording medium, and content delivering system | |
KR20170102249A (en) | Reception device, reception method, transmission device, and transmission method | |
JP2013157820A (en) | Generation device, playback device, generation method, playback method, data structure, control program, and recording medium | |
KR102330694B1 (en) | Transmission apparatus, transmission method, reception apparatus, and reception method | |
US20140281028A1 (en) | Delivery device, delivery method, association information generation device, association information generation method, control program, and recording medium | |
JP2013229689A (en) | Reproduction device, distribution device, data structure, reproduction method, distribution method, control program, and recording medium | |
JP2013157948A (en) | Reproduction apparatus, reproduction method, distribution system, reproduction program, and recording medium | |
US7984205B2 (en) | Method and devices for the transfer of a data flow from a data source to a data sink | |
US20140222961A1 (en) | Reproduction apparatus, reproduction method, distribution apparatus, distribution system, reproduction program, and storage medium | |
JP6294987B2 (en) | Playback device, distribution device | |
CN107615767A (en) | Dispensing device, sending method, media processor, media processing method and reception device | |
KR101907020B1 (en) | Signaling method for emergency alert via broadcast network in both transmitting and receiving side and apparatus thereof | |
JP2002297494A (en) | Data delivery system, terminal apparatus, scenario proxy server and data delivery method | |
WO2015152281A1 (en) | Reproduction device and delivery device | |
JP2006319495A (en) | Distribution system, node device and method for complementing data packet or the like | |
JP2005236706A (en) | System, device and terminal for reproducing video and sound | |
JP2016171358A (en) | Information processing device |